<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 Transitional//EN">
<HTML><HEAD><TITLE>RE: [Rasch] Not a Fan of Lexiles?</TITLE>
<META http-equiv=Content-Type content="text/html; charset=us-ascii">
<STYLE type=text/css>BLOCKQUOTE {
        PADDING-BOTTOM: 0px; PADDING-TOP: 0px
}
DL {
        PADDING-BOTTOM: 0px; PADDING-TOP: 0px
}
UL {
        PADDING-BOTTOM: 0px; PADDING-TOP: 0px
}
OL {
        PADDING-BOTTOM: 0px; PADDING-TOP: 0px
}
LI {
        PADDING-BOTTOM: 0px; PADDING-TOP: 0px
}
</STYLE>

<META content="MSHTML 6.00.6000.16544" name=GENERATOR></HEAD>
<BODY>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2><BR>
<BLOCKQUOTE dir=ltr 
style="PADDING-LEFT: 5px; MARGIN-LEFT: 5px; BORDER-LEFT: #000000 2px solid; MARGIN-RIGHT: 0px">
  <DIV class=OutlookMessageHeader lang=en-us dir=ltr align=left>
  <HR tabIndex=-1>
  <FONT face=Tahoma size=2><B>From:</B> Trevor Bond 
  [mailto:trevor.bond@jcu.edu.au] <BR><B>Sent:</B> Thursday, November 01, 2007 
  1:34 PM<BR><B>To:</B> Lang, William Steve; Rense; Paul Barrett; 
  rasch@acer.edu.au<BR><B>Subject:</B> RE: [Rasch] Not a Fan of 
  Lexiles?<BR></FONT><BR></DIV>
  <DIV></DIV>
  <BLOCKQUOTE cite="" type="cite">
    <DIV><FONT color=#0000ff>It reveals beautifully when raw scores don't add 
    up.<FONT face="Times New Roman"> M</FONT>ean scores for patients and their 
    proxies on the Dysexecutive Questionnaire (DEX) provided another 
    confirmation of previous findings<FONT face="Times New Roman">: patient and 
    proxies yield the same total scores.</FONT> Clinicians using the DEX expect 
    that a positive difference between<FONT face="Times New Roman"> proxy 
    (e.g.</FONT> family<FONT face="Times New Roman">)</FONT> rating totals and 
    patient self-rating totals implicates dysexecutive function. The Chan and 
    Bode (Rasch) analysis reveals mis-fit and bi-directional 
    DIF.</FONT><BR></DIV></BLOCKQUOTE></BLOCKQUOTE></FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>Hello Trevor</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>In general, if you wish to propose a relationship between a set of 
symptoms or composite&nbsp;attribute diagnosis (dysexecutive function) and 
magnitudes of anything else (whether discrepancy measure or some other set of 
magnitudes), all you do is map the magnitudes onto the diagnosis "indicator" as 
a&nbsp;conditional rate function or tabulation. From what you are saying, there 
were no discrepancies observed between peer and self-report ratings on the DEX. 
</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>Given a strong theory or set of expectations that peer and self-report 
ratings should differ - clearly something was amiss with the DEX, or the manner 
in which dysexecutive function criteria were being defined. So,&nbsp;the 
perceptive investigator would&nbsp;drill down to the item level&nbsp;and take a 
hard look at the items - both empirically as well as from a theory/symptomology 
perspective - and attempt to figure out why the problem was 
occurring.</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>The difference between me and the Rasch investigator at this point 
is:</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>In my world, no strong assumption is made about the quantitative 
structure of a latent variable called "Dysexecutive Function". So, I pick 
through the data while carefully reconsidering the veracity of those 
"theoretical expectations". I make no assumptions about dimensionality - but 
merely seek to maximize the discrepancy vs actual functional/behavioral deficit 
cross-validated predictive accuracy "by any means possible". It is the 
predictive accuracy or relevant criteria which defines the success of my 
work.</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>In the Rasch world, everything is done "by the numbers" - with a whopping 
assumption that Dysexecutive Function&nbsp;is a unidimensional quantitatively 
structured variable identical to THE latent variable&nbsp;constructed&nbsp;by 
the Rasch model. Success is regarded perhaps as more a function of model fit and 
obtaining expected peer-self score discrepancies, irrespective whether these 
maximize the predictive accuracy of that discrepancy 
measure.</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>In the end, it would be the predictive accuracy of either approach which 
would/should be the final arbiter of success.</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>So, when you say "<FONT face="Times New Roman" size=3><FONT 
color=#0000ff>new insights revealed because the model and software encouraged a 
different way of thinking</FONT>", <FONT face=Arial size=2>I can only agree 
wholeheartedly. It did "the business" by all accounts so in this case it was 
clearly a success. </FONT></FONT></FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2><FONT face="Times New Roman" size=3><FONT face=Arial 
size=2></FONT></FONT></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2><FONT face="Times New Roman" size=3><FONT face=Arial size=2>But I wonder 
whether my more "examine those expectations &amp; predictive accuracy 
maximization approach" would have achieved even greater utility without so many 
assumptions being made about the structure of the data? 
</FONT></FONT></FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>Once you treat data models as "optional", and focus on the problem to be 
solved rather than forcing a single data model to be applied to it, all kinds of 
analysis and solution options open up. </FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>But, I guess if your primary goal, or your&nbsp;perception of a 
problem-solution is to create a quantitatively structured latent variable, 
then&nbsp;a data-model approach&nbsp;is mandatory, with the&nbsp;appropriate 
indicators of model fit.</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>And that opens up the&nbsp;wider issue - the status of data models 
themselves&nbsp;(Breiman, L. (2001) Statistical Modeling: the two cultures. 
<EM>Statistical Science</EM>, 16, 3, 199-231).&nbsp;</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial size=2>I 
find these discussions fascinating for my own thinking at 
least.</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007><FONT face=Arial 
size=2>Regards ... Paul</FONT></SPAN></DIV>
<DIV dir=ltr align=left><SPAN class=109241301-01112007></SPAN><SPAN 
class=109241301-01112007></SPAN><SPAN class=109241301-01112007></SPAN><SPAN 
class=109241301-01112007></SPAN><SPAN class=109241301-01112007></SPAN><SPAN 
class=109241301-01112007><FONT face=Arial size=2></FONT></SPAN>&nbsp;</DIV>
<DIV>&nbsp;</DIV><FONT color=#000000><FONT color=#000000><SPAN 
style="FONT-SIZE: 10pt; FONT-FAMILY: Arial; mso-no-proof: yes">
<DIV align=left>
<DIV align=left>
<DIV class=Section1>
<DIV align=left>
<TABLE class=MsoNormalTable id=table1 
style="WIDTH: 375pt; BORDER-COLLAPSE: collapse" cellSpacing=0 cellPadding=0 
width=500 align=left border=0>
  <TBODY>
  <TR style="HEIGHT: 49.5pt">
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 167.25pt; PADDING-TOP: 0in; HEIGHT: 49.5pt" 
    width=223>
      <P class=MsoNormal><IMG height=66 src="cid:109241301@01112007-207C" 
      width=150 border=0></P></TD>
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 207.75pt; PADDING-TOP: 0in; HEIGHT: 49.5pt" 
    width=277>
      <P class=MsoNormal><FONT size=2></FONT>&nbsp;</P></TD></TR>
  <TR style="HEIGHT: 10.5pt">
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 167.25pt; PADDING-TOP: 0in; HEIGHT: 10.5pt" 
    width=223>
      <P class=MsoNormal style="LINE-HEIGHT: 10.5pt"><SPAN 
      style="FONT-SIZE: 8pt; COLOR: #808080"><B><SPAN 
      style="FONT-FAMILY: Arial">Paul Barrett, Ph.D.</SPAN></B></SPAN></P></TD>
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 207.75pt; PADDING-TOP: 0in; HEIGHT: 10.5pt" 
    width=277>
      <P class=MsoNormal style="LINE-HEIGHT: 10.5pt"><B><SPAN 
      style="FONT-SIZE: 8pt; COLOR: gray; FONT-FAMILY: Arial">2622 East 21st 
      Street | <!--StartFragment-->Tulsa, OK&nbsp; 74114</SPAN></B></P></TD></TR>
  <TR style="HEIGHT: 10.5pt">
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 167.25pt; PADDING-TOP: 0in; HEIGHT: 10.5pt" 
    width=223>
      <P class=MsoNormal style="LINE-HEIGHT: 10.5pt"><SPAN 
      style="FONT-SIZE: 8pt; COLOR: #808080"><B><SPAN 
      style="FONT-FAMILY: Arial">Chief Research 
    Scientist</SPAN></B></SPAN></P></TD>
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 207.75pt; PADDING-TOP: 0in; HEIGHT: 10.5pt" 
    width=277>
      <P class=MsoNormal style="LINE-HEIGHT: 10.5pt"><B><SPAN 
      style="FONT-SIZE: 8pt; COLOR: gray; FONT-FAMILY: Arial">Office | 
      918.749.0632&nbsp; Fax | 918.749.0635</SPAN></B></P></TD></TR>
  <TR style="HEIGHT: 10.5pt">
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 167.25pt; PADDING-TOP: 0in; HEIGHT: 10.5pt" 
    width=223>
      <P class=MsoNormal style="LINE-HEIGHT: 10.5pt"><B><SPAN 
      style="FONT-SIZE: 8pt; COLOR: gray; FONT-FAMILY: Arial">pbarrett@hoganassessments.com</SPAN></B></P></TD>
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 207.75pt; PADDING-TOP: 0in; HEIGHT: 10.5pt" 
    width=277>
      <P class=MsoNormal style="LINE-HEIGHT: 10.5pt"><B><SPAN 
      style="FONT-SIZE: 8pt; COLOR: gray; FONT-FAMILY: Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 
      </SPAN></B></P></TD></TR>
  <TR style="HEIGHT: 14.25pt">
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 167.25pt; PADDING-TOP: 0in; HEIGHT: 14.25pt" 
    width=223>
      <P class=MsoNormal><B><SPAN style="FONT-FAMILY: Arial"><A 
      title=http://www.hoganassessments.com/ 
      href="http://www.hoganassessments.com/"><SPAN 
      title=http://www.hoganassessments.com/ 
      style="FONT-SIZE: 8pt; COLOR: gray; TEXT-DECORATION: none">hoganassessments.com</SPAN></A></SPAN></B></P></TD>
    <TD 
    style="PADDING-RIGHT: 0in; PADDING-LEFT: 0in; PADDING-BOTTOM: 0in; WIDTH: 207.75pt; PADDING-TOP: 0in; HEIGHT: 14.25pt" 
    width=277>
      <P class=MsoNormal><SPAN 
  style="FONT-FAMILY: Arial"></SPAN>&nbsp;</P></TD></TR></TBODY></TABLE></DIV>
<P class=MsoNormal style="MARGIN-LEFT: -5.25pt">&nbsp;</P></DIV>
<P>&nbsp;</P></DIV></DIV></SPAN><SPAN style="mso-no-proof: yes">
<P></P>
<P>&nbsp;</P></SPAN></FONT></FONT>
<DIV><FONT face=Arial size=2></FONT>&nbsp;</DIV></BODY></HTML>