<html><body><div style="color:#000; background-color:#fff; font-family:lucida console, sans-serif;font-size:14pt"><div style="RIGHT: auto"><SPAN style="RIGHT: auto">I am&nbsp;again facing this problem according to Lucia's question and actual answers:</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">Question: I am doing a research and have method A and method B, which is better?</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">Answser 1: Do both and compare, if you do not find differences then&nbsp;both methods are the same, if you do find&nbsp;differences then both methods are different.</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">Answer&nbsp;2:&nbsp;why do you use methods A and B? try method C.</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">Answer 3 could be: </SPAN><SPAN style="RIGHT: auto">In the next step&nbsp;we can&nbsp;propose method D or any other procedure...and if&nbsp;researcher X&nbsp;has a software then method X is better, or if the agency Y uses method Y then method Y is better...</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">I'm lost.</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">Regards</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto">Agustin<VAR id=yui-ie-cursor></VAR></SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: lucida console, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 19px; RIGHT: auto"><SPAN style="RIGHT: auto"></SPAN>&nbsp;</div>
<DIV></DIV>
<DIV>&nbsp;</DIV>
<div><B><FONT color=#0000bf face="arial, helvetica, sans-serif">INSTITUTO DE EVALUACION E INGENIERIA AVANZADA.</FONT></B></div>
<div style="RIGHT: auto"><B style="RIGHT: auto"><FONT color=#0000bf face="arial, helvetica, sans-serif">
<div><BR></FONT></div></B>
<div></div>Ave. Cordillera Occidental No. 635</div>
<div style="RIGHT: auto">Colonia Lomas 4ª San Luis Potosí, San Luis Potosí.</div>
<div>C.P. 78216 MEXICO</div>
<div>(52) (444) 8 25 50 76 / (52) (444) 8 25 50 77 / (52) (444) 8 25 50 78</div>
<div>Página Web (en español): <A href="http://www.ieia.com.mx/" rel=nofollow target=_blank>http://www.ieia.com.mx/</A></div>
<div>Web page (in English): http://www.ieesa-kalt.com/English/Frames_sp_pro.html<BR></div>
<div><BR></div>
<DIV style="FONT-FAMILY: lucida console, sans-serif; FONT-SIZE: 14pt">
<DIV style="FONT-FAMILY: times new roman, new york, times, serif; FONT-SIZE: 12pt">
<DIV dir=ltr>
<DIV style="BORDER-BOTTOM: #ccc 1px solid; BORDER-LEFT: #ccc 1px solid; PADDING-BOTTOM: 0px; LINE-HEIGHT: 0; MARGIN: 5px 0px; PADDING-LEFT: 0px; PADDING-RIGHT: 0px; HEIGHT: 0px; FONT-SIZE: 0px; BORDER-TOP: #ccc 1px solid; BORDER-RIGHT: #ccc 1px solid; PADDING-TOP: 0px" class=hr readonly="true" contenteditable="false"></DIV><FONT size=2 face=Arial><B><SPAN style="FONT-WEIGHT: bold">From:</SPAN></B> Rense Lange &lt;rense.lange@gmail.com&gt;<BR><B><SPAN style="FONT-WEIGHT: bold">To:</SPAN></B> rasch@acer.edu.au <BR><B><SPAN style="FONT-WEIGHT: bold">Sent:</SPAN></B> Saturday, June 22, 2013 10:00 AM<BR><B><SPAN style="FONT-WEIGHT: bold">Subject:</SPAN></B> Re: [Rasch] Rasch: analyze two versions of a test<BR></FONT></DIV>
<DIV class=y_msg_container><BR>
<DIV id=yiv6255233474>
<DIV>
<DIV><BR></DIV>
<DIV>Is there any way to have two or more raters evaluate the same people on a fairly large scale? If so, you can also check rater effects using Facets … Even if you had only very limited numbers of double/triple/ … ratings, large rater differences/biases would be a sign for caution.</DIV>
<DIV><BR></DIV>
<DIV>Rense Lange</DIV><BR>
<DIV>
<DIV>On Jun 22, 2013, at 8:17 AM, "Bond, Trevor" &lt;<A href="mailto:trevor.bond@jcu.edu.au" rel=nofollow target=_blank ymailto="mailto:trevor.bond@jcu.edu.au">trevor.bond@jcu.edu.au</A>&gt; wrote:</DIV><BR class=yiv6255233474Apple-interchange-newline>
<BLOCKQUOTE type="cite">
<DIV>
<DIV>Dear Lucia</DIV>
<DIV>You do it both ways, expecting invariance.</DIV>
<DIV>Where you don't, you look for reasons.</DIV>
<DIV>Then choose.</DIV>
<DIV>TGB</DIV>
<DIV><BR><BR>Sent from 007's iPad</DIV>
<DIV><BR>On 22/06/2013, at 12:19 PM, "Lucia Luyten" &lt;<A href="mailto:Lucia.Luyten@arts.kuleuven.be" rel=nofollow target=_blank ymailto="mailto:Lucia.Luyten@arts.kuleuven.be">Lucia.Luyten@arts.kuleuven.be</A>&gt; wrote:<BR><BR></DIV>
<BLOCKQUOTE type="cite">
<DIV>
<DIV style="FONT-FAMILY: Tahoma; DIRECTION: ltr; FONT-SIZE: 10pt">Hi 
<DIV><BR></DIV>
<DIV>I have a question about analyzing two versions of a test.&nbsp;</DIV>
<DIV><BR></DIV>
<DIV>Say we have 130 items for a test. We make two versions of this test. In version A, we put items number 1 to 80 and in version 2 the items number 50 to 130. So items 50-80 are in both versions. In version A, the item numbers 1 to 30 are anchor items from a previous test. For these items, we know and use the measures from a previous Facets analysis. These anchor items (1-30) occur only in version A, not in version B.</DIV>
<DIV><BR></DIV>
<DIV>About 400 candidates take version A, and about 250 take version B. The test is rated by 4 raters. Raters rate both versions, each test taker is rated by one random rater.</DIV>
<DIV><BR></DIV>
<DIV>One might choose to take all candidates together for analysis. Or one can choose to first analyze version A separately (using the measures for the anchor items). &nbsp;And then use the outcome, i.e. the measures for the identical items (number 50-80) and the measures for the raters, in the subsequent analyses of version B.&nbsp;</DIV>
<DIV><BR></DIV>
<DIV>Which way of analyzing is preferable and why is it?</DIV>
<DIV><BR></DIV>
<DIV>Kind regards,&nbsp;</DIV>
<DIV><BR></DIV>
<DIV>Lucia Luyten</DIV>
<DIV><BR></DIV>
<DIV><BR>
<DIV style="FONT-FAMILY: Tahoma; FONT-SIZE: 13px"><FONT size=2 face=Arial>
<DIV>
<DIV style="BORDER-BOTTOM: #ccc 1px solid; BORDER-LEFT: #ccc 1px solid; PADDING-BOTTOM: 0px; LINE-HEIGHT: 0; MARGIN: 5px 0px; PADDING-LEFT: 0px; PADDING-RIGHT: 0px; HEIGHT: 0px; FONT-SIZE: 0px; BORDER-TOP: #ccc 1px solid; BORDER-RIGHT: #ccc 1px solid; PADDING-TOP: 0px" class=hr readonly="true" contenteditable="false"></DIV></DIV>
<DIV>Lucia Luyten<BR>wetenschappelijk medewerker<BR>CNaVT / CTO / KULeuven<BR>Blijde-Inkomststraat 7 bus 3319<BR>3000 Leuven<BR>016 32 53 59<BR>fax 016 32 53 60<BR><A href="mailto:lucia.luyten@arts.kuleuven.be" rel=nofollow target=_blank ymailto="mailto:lucia.luyten@arts.kuleuven.be">lucia.luyten@arts.kuleuven.be</A><BR>
<div class=yiv6255233474MsoNormal><A href="http://www.cnavt.org/" rel=nofollow target=_blank>http://www.cnavt.org/</A></div>
<div class=yiv6255233474MsoNormal><A href="http://www.cteno.be/" rel=nofollow target=_blank>http://www.cteno.be/</A></div></DIV>
<DIV><BR></DIV>
<DIV><FONT face=arial></FONT><BR>&nbsp;</DIV>
<DIV>&nbsp;</DIV></FONT></DIV></DIV></DIV></DIV></BLOCKQUOTE>
<BLOCKQUOTE type="cite">
<DIV><SPAN>_______________________________________________</SPAN><BR><SPAN>Rasch mailing list</SPAN><BR><SPAN><A href="mailto:Rasch@acer.edu.au" rel=nofollow target=_blank ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A></SPAN><BR><SPAN>Unsubscribe: <A href="https://mailinglist.acer.edu.au/mailman/options/rasch/trevor.bond%40jcu.edu.au" rel=nofollow target=_blank>https://mailinglist.acer.edu.au/mailman/options/rasch/trevor.bond%40jcu.edu.au</A></SPAN></DIV></BLOCKQUOTE></DIV>_______________________________________________<BR>Rasch mailing list<BR><A href="mailto:Rasch@acer.edu.au" rel=nofollow target=_blank ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A><BR>Unsubscribe: https://mailinglist.acer.edu.au/mailman/options/rasch/rense.lange%40gmail.com</BLOCKQUOTE></DIV><BR></DIV></DIV><BR>_______________________________________________<BR>Rasch mailing list<BR><A href="mailto:Rasch@acer.edu.au"
 ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A><BR>Unsubscribe: <A href="https://mailinglist.acer.edu.au/mailman/options/rasch/ici_kalt%40yahoo.com" target=_blank>https://mailinglist.acer.edu.au/mailman/options/rasch/ici_kalt%40yahoo.com</A><BR><BR></DIV></DIV></DIV></div></body></html>