<html><body><div style="color:#000; background-color:#fff; font-family:arial, helvetica, sans-serif;font-size:12pt"><div style="RIGHT: auto"><SPAN style="RIGHT: auto">Hello! </SPAN></div>
<div style="RIGHT: auto"><SPAN style="RIGHT: auto"><VAR id=yui-ie-cursor></VAR>I have been faced to this kind of comments in a review when doing a SEM and HLM analysis of the data coming from PISA 2009. The review was based on the publications by ACER (main responsible of the PISA project), where they use Conquest and Mplus.&nbsp;Instead we used Winsteps, AMOS and HLM 5.0. </SPAN></div>
<div style="RIGHT: auto"><SPAN style="RIGHT: auto">We have discussed to the publishers that it is not necessary to do the analysis exactly as ACER did, using those programs if our model was correct and our approach was well based.</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: arial, helvetica, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 16px; RIGHT: auto"><SPAN style="RIGHT: auto">The need of plausible values for PISA is related to the fact that they are doing a sample for every nation and they are not interested on every individual&nbsp;person. We have worked with the plausible values and also other values provided by the PISA data set, but this is useful if the purpose of your project is similar to PISA, otherwise I think this is not necessary.</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: arial, helvetica, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 16px; RIGHT: auto"><SPAN style="RIGHT: auto">Regards</SPAN></div>
<div style="BACKGROUND-COLOR: transparent; FONT-STYLE: normal; FONT-FAMILY: arial, helvetica, sans-serif; COLOR: rgb(0,0,0); FONT-SIZE: 16px; RIGHT: auto"><SPAN style="RIGHT: auto">Agustin Tristan</SPAN></div>
<DIV></DIV>
<DIV style="RIGHT: auto">&nbsp;</DIV>
<div><B><FONT color=#0000bf face="arial, helvetica, sans-serif">INSTITUTO DE EVALUACION E INGENIERIA AVANZADA.</FONT></B></div>
<div><B><FONT color=#0000bf face="arial, helvetica, sans-serif">
<div><BR></FONT></div></B>
<div></div>Ave. Cordillera Occidental No. 635</div>
<div>Colonia Lomas 4ª San Luis Potosí, San Luis Potosí.</div>
<div>C.P. 78216 MEXICO</div>
<div>(52) (444) 8 25 50 76 / (52) (444) 8 25 50 77 / (52) (444) 8 25 50 78</div>
<div>Página Web (en español): <A href="http://www.ieia.com.mx/" rel=nofollow target=_blank>http://www.ieia.com.mx/</A></div>
<div>Web page (in English): http://www.ieesa-kalt.com/English/Frames_sp_pro.html<BR></div>
<div><BR></div>
<DIV style="FONT-FAMILY: arial, helvetica, sans-serif; FONT-SIZE: 12pt">
<DIV style="FONT-FAMILY: times new roman, new york, times, serif; FONT-SIZE: 12pt">
<DIV dir=ltr>
<DIV style="BORDER-BOTTOM: #ccc 1px solid; BORDER-LEFT: #ccc 1px solid; PADDING-BOTTOM: 0px; LINE-HEIGHT: 0; MARGIN: 5px 0px; PADDING-LEFT: 0px; PADDING-RIGHT: 0px; HEIGHT: 0px; FONT-SIZE: 0px; BORDER-TOP: #ccc 1px solid; BORDER-RIGHT: #ccc 1px solid; PADDING-TOP: 0px" class=hr readonly="true" contenteditable="false"></DIV><FONT size=2 face=Arial><B><SPAN style="FONT-WEIGHT: bold">From:</SPAN></B> Wenchung &lt;psywcw@gmail.com&gt;<BR><B><SPAN style="FONT-WEIGHT: bold">To:</SPAN></B> "rasch@acer.edu.au" &lt;rasch@acer.edu.au&gt; <BR><B><SPAN style="FONT-WEIGHT: bold">Cc:</SPAN></B> "&lt;rasch@acer.edu.au&gt;" &lt;rasch@acer.edu.au&gt; <BR><B><SPAN style="FONT-WEIGHT: bold">Sent:</SPAN></B> Friday, June 7, 2013 7:29 PM<BR><B><SPAN style="FONT-WEIGHT: bold">Subject:</SPAN></B> Re: [Rasch] Hierarchical Rasch Modeling<BR></FONT></DIV>
<DIV class=y_msg_container><BR>Dear all, <BR><BR>I think the reviewer may be concerned of measurement error in the person measures that are produced in 1st step. When these person measures are directly plugged into the next stage analysis, their measurement errors are ignored, which will underestimate the standard error of the next stage estimates. People often use "plausible values" to resolve with this problem. Please refer to the Pisa technical report or the relevant literature of plausible values. <BR><BR>As I know, mplus or winbugs can do multilevel Rasch analysis. <BR><BR>Wen-Chung. <BR><BR><BR>從我的 iPad 傳送<BR><BR>Robert Hess &lt;<A href="mailto:Robert.Hess@ASU.edu" ymailto="mailto:Robert.Hess@ASU.edu">Robert.Hess@ASU.edu</A>&gt; 於 2013年6月8日 7:35 寫道:<BR><BR>&gt; Stuart:<BR>&gt; First, I disagree with your reviewer. Mike is absolutely correct, if you do<BR>&gt; everything at one time all you do is compound any felonies that
 might've<BR>&gt; been committed in level I to the point that when you reach level III either<BR>&gt; nothing works or everything works because you missed any possible sources of<BR>&gt; unexplained error by attempting to do everything in a single pass. And you<BR>&gt; are correct, HLM will not do what you are doing nor will it do what the<BR>&gt; reviewer seems to be requesting.<BR>&gt; My best suggestion for you, is to layout the argument detailing clearly why<BR>&gt; you chose to do the three-step process (as you did in your earlier note) and<BR>&gt; find another way to express the sentiment laid out by Mike. Sometimes you're<BR>&gt; dealing with a reviewer who really doesn't understand the model you are<BR>&gt; employing and you have to find a logical explanation why you are sticking to<BR>&gt; your original model - you address this to the editor, but as an explanation,<BR>&gt; not as a failure on the part of the reviewer to understand your model
 (which<BR>&gt; I will bet dollars to dimes) is what happened.<BR>&gt; Good luck.<BR>&gt; Bob Hess<BR>&gt; <BR>&gt; -----Original Message-----<BR>&gt; From: <A href="mailto:rasch-bounces@acer.edu.au" ymailto="mailto:rasch-bounces@acer.edu.au">rasch-bounces@acer.edu.au</A> [mailto:<A href="mailto:rasch-bounces@acer.edu.au" ymailto="mailto:rasch-bounces@acer.edu.au">rasch-bounces@acer.edu.au</A>] On Behalf<BR>&gt; Of Mike Linacre<BR>&gt; Sent: Friday, June 07, 2013 3:56 PM<BR>&gt; To: <A href="mailto:rasch@acer.edu.au" ymailto="mailto:rasch@acer.edu.au">rasch@acer.edu.au</A><BR>&gt; Subject: Re: [Rasch] Hierarchical Rasch Modeling<BR>&gt; <BR>&gt; Stuart and folks:<BR>&gt; <BR>&gt; The reviewer seems to be addressing the wrong issue: "it would be more<BR>&gt; efficient ..."<BR>&gt; <BR>&gt; Surely concern should focus on "it would be more accurate ..."<BR>&gt; <BR>&gt; In science in general, the more accurate approach is "one thing at a time".<BR>&gt; This
 approach is your 3-level approach where findings at each level can be<BR>&gt; verified before the next level is attempted. In the combined approach,<BR>&gt; inaccuracies at the first level are likely to be invisible by the third<BR>&gt; level producing undetectable distortions in the findings.<BR>&gt; <BR>&gt; Mike L.<BR>&gt; <BR>&gt; <BR>&gt; <BR>&gt; _______________________________________________<BR>&gt; Rasch mailing list<BR>&gt; <A href="mailto:Rasch@acer.edu.au" ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A><BR>&gt; Unsubscribe:<BR>&gt; <A href="https://mailinglist.acer.edu.au/mailman/options/rasch/robert.hess%40asu.edu" target=_blank>https://mailinglist.acer.edu.au/mailman/options/rasch/robert.hess%40asu.edu</A><BR>&gt; <BR>&gt; _______________________________________________<BR>&gt; Rasch mailing list<BR>&gt; <A href="mailto:Rasch@acer.edu.au" ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A><BR>&gt; Unsubscribe: <A
 href="https://mailinglist.acer.edu.au/mailman/options/rasch/psywcw%40gmail.com" target=_blank>https://mailinglist.acer.edu.au/mailman/options/rasch/psywcw%40gmail.com</A><BR>_______________________________________________<BR>Rasch mailing list<BR><A href="mailto:Rasch@acer.edu.au" ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A><BR>Unsubscribe: <A href="https://mailinglist.acer.edu.au/mailman/options/rasch/ici_kalt%40yahoo.com" target=_blank>https://mailinglist.acer.edu.au/mailman/options/rasch/ici_kalt%40yahoo.com</A><BR><BR></DIV></DIV></DIV></div></body></html>