<html><body><div style="color:#000; background-color:#fff; font-family:times new roman, new york, times, serif;font-size:8pt"><div><span>Can you please indicate: (1) How many students are you including in your analysis? (2) What are the values of ZSTD infit?&nbsp; </span></div><div><span>Or even better: May you please send a table of your items showing measure, MNSQ Fit, ZSTD fit and the ptbis?</span></div><div><span>&nbsp;We can discuss about that.</span></div><div><span>One of the main problems is to interpretate ptbis as a measure of fit or as a measure of discrimination or whatever. We can discuss about that too.</span></div><div><span>Regards</span></div><div><span>Agustin</span></div><div></div><div>&nbsp;</div><div><b><font color="#0000bf" face="arial, helvetica, sans-serif">INSTITUTO DE EVALUACION E INGENIERIA AVANZADA.</font></b></div><div><b><font color="#0000bf" face="arial, helvetica, sans-serif"><div><br></div></font></b></div><div>Ave.
 Cordillera Occidental No. 635</div><div>Colonia Lomas 4ª San Luis Potosí, San Luis Potosí.</div><div>C.P. 78216 MEXICO</div><div>(52) (444) 8 25 50 76 / (52) (444) 8 25 50 77 / (52) (444) 8 25 50 78</div><div>Página Web (en español): <a href="http://www.ieia.com.mx/" rel="nofollow" target="_blank">http://www.ieia.com.mx</a></div><div>Web page (in English): http://www.ieesa-kalt.com/English/Frames_sp_pro.html<br></div><div><br></div>  <div style="font-family: times new roman, new york, times, serif; font-size: 8pt;"> <div style="font-family: times new roman, new york, times, serif; font-size: 12pt;"> <div dir="ltr"> <font size="2" face="Arial"> <div style="margin: 5px 0px; padding: 0px; border: 1px solid rgb(204, 204, 204); height: 0px; line-height: 0; font-size: 0px;" class="hr" contentEditable="false" readonly="true"></div>  <b><span style="font-weight: bold;">From:</span></b> "Stone, Gregory" &lt;Gregory.Stone@UToledo.Edu&gt;<br> <b><span
 style="font-weight: bold;">To:</span></b> "&lt;rasch@acer.edu.au&gt;" &lt;rasch@acer.edu.au&gt; <br> <b><span style="font-weight: bold;">Sent:</span></b> Tuesday, March 6, 2012 12:54 PM<br> <b><span style="font-weight: bold;">Subject:</span></b> Re: [Rasch] Negative pt-bis and fit of 1.0? How can this be?<br> </font> </div> <br>
<meta content="off" http-equiv="x-dns-prefetch-control"><div id="yiv409715065">

 

<div>
Sending this to you and not the listserv. &nbsp;I have come to the conclusion that apart from using it as one consideration for dimensionality, fit is a useless statistic when it comes to assessing reasonability of item performance. &nbsp;While I have no empirical evidence
 of this, gathered deliberately, it has appeared to me that time after time, decisions made with point biserials are consistently more reasonable than any made with fit, regardless of whether we accept the largely arbitrary range of fit so popularized in books
 like Bond and Fox, or the more rational fit calculated by folks like Smith. This appears to hold true for small datasets, where many items demonstrate fit concerns, and large datasets where everything, naturally, fits perfectly. Thoughts?
<div><br>
</div>
<div>Gregory<br>
<div><br>
</div>
<div><br>
<div>
<div>On Mar 6, 2012, at 1:46 PM, Mark Moulton wrote:</div>
<br class="yiv409715065Apple-interchange-newline">
<blockquote type="cite">Stuart,
<div><br>
</div>
<div>Belay my previous message (coffee hadn't kicked in yet).</div>
<div><br>
</div>
<div>You're right. &nbsp;Variances -- p * (1 - p) at the extreme of p (1 or 0) will be smaller, which should make the misfits bigger.</div>
<div><br>
</div>
<div>Could those cell probabilities p[ni] actually be close to 0.50? &nbsp;This would happen if the person measures tended to collapse to the center of the scale, an artifact of randomness.</div>
<div><br>
</div>
<div>Mark<br>
<br>
<br>
<br>
<div class="yiv409715065gmail_quote">On Tue, Mar 6, 2012 at 7:58 AM, Stuart Luppescu <span dir="ltr">
&lt;<a href="mailto:slu@ccsr.uchicago.edu" rel="nofollow" target="_blank" ymailto="mailto:slu@ccsr.uchicago.edu">slu@ccsr.uchicago.edu</a>&gt;</span> wrote:<br>
<blockquote style="margin: 0px 0px 0px 0.8ex; padding-left: 1ex; border-left-color: rgb(204, 204, 204); border-left-width: 1px; border-left-style: solid;" class="yiv409715065gmail_quote">
Hello, I'm analyzing items suggested for a course final exam. The<br>
problem is that the students the items are tested on have not taken the<br>
course yet. This results in very poor performance. The average person<br>
measure is -0.78, and the average item p-value is 0.33 (for 4-choice<br>
multiple choice items).<br>
<br>
What is confusing me is that all the items have mean-square fit<br>
statistics (infit and outfit) near 1.0, while many of them have negative<br>
point-biserial correlations. According to my understanding, the fit<br>
statistics are calculated from an aggregation of the squared<br>
standardized residuals, which are calculated from the raw residual<br>
divided by the score variance. In this case, the expectation of an<br>
individual response would be low, so raw residuals would be large. And<br>
the score variance at the extremes are lower than in the middle, so you<br>
divide a large raw residual by a small score variance and you get a very<br>
large standardized residual, right? So, how come the fits are close to<br>
expectation? Especially since the pt-bis are low or negative? I don't<br>
get it. Can someone explain this to me?<br>
<br>
Thanks.<br>
--<br>
Stuart Luppescu -=- slu .at. <a href="http://ccsr.uchicago.edu/" rel="nofollow" target="_blank">
ccsr.uchicago.edu</a><br>
University of Chicago -=- CCSR<br>
才文と智奈美の父 -=- &nbsp; &nbsp;Kernel 3.2.1-gentoo-r2<br>
What we have is nice, but we need something very<br>
&nbsp;different. &nbsp; &nbsp;-- Robert Gentleman<br>
&nbsp;Statistical Computing 2003, Reisensburg (June<br>
&nbsp;2003)<br>
<br>
<br>
<br>
<br>
<br>
<br>
_______________________________________________<br>
Rasch mailing list<br>
<a href="mailto:Rasch@acer.edu.au" rel="nofollow" target="_blank" ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</a><br>
Unsubscribe: <a href="https://mailinglist.acer.edu.au/mailman/options/rasch/markm%40eddata.com" rel="nofollow" target="_blank">
https://mailinglist.acer.edu.au/mailman/options/rasch/markm%40eddata.com</a></blockquote>
</div>
<br>
</div>
_______________________________________________<br>
Rasch mailing list<br>
<a href="mailto:Rasch@acer.edu.au" rel="nofollow" target="_blank" ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</a><br>
Unsubscribe: https://mailinglist.acer.edu.au/mailman/options/rasch/gregory.stone%40utoledo.edu</blockquote>
</div>
<br>
</div>
</div>
</div>

</div><meta content="on" http-equiv="x-dns-prefetch-control"><br>_______________________________________________<br>Rasch mailing list<br><a href="mailto:Rasch@acer.edu.au" ymailto="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</a><br>Unsubscribe: <a href="https://mailinglist.acer.edu.au/mailman/options/rasch/ici_kalt%40yahoo.com" target="_blank">https://mailinglist.acer.edu.au/mailman/options/rasch/ici_kalt%40yahoo.com</a><br><br> </div> </div>  </div></body></html>