<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 Transitional//EN">
<HTML xmlns="http://www.w3.org/TR/REC-html40" xmlns:v = 
"urn:schemas-microsoft-com:vml" xmlns:o = 
"urn:schemas-microsoft-com:office:office" xmlns:w = 
"urn:schemas-microsoft-com:office:word" xmlns:x = 
"urn:schemas-microsoft-com:office:excel" xmlns:p = 
"urn:schemas-microsoft-com:office:powerpoint" xmlns:oa = 
"urn:schemas-microsoft-com:office:activation" xmlns:st1 = 
"urn:schemas-microsoft-com:office:smarttags"><HEAD>
<META http-equiv=Content-Type content="text/html; charset=iso-8859-1">
<META content="MSHTML 6.00.2900.2963" name=GENERATOR><!--[if !mso]>
<STYLE>v\:* {
        BEHAVIOR: url(#default#VML)
}
o\:* {
        BEHAVIOR: url(#default#VML)
}
w\:* {
        BEHAVIOR: url(#default#VML)
}
.shape {
        BEHAVIOR: url(#default#VML)
}
</STYLE>
<![endif]--><o:SmartTagType name="Street" 
namespaceuri="urn:schemas-microsoft-com:office:smarttags"></o:SmartTagType><o:SmartTagType 
name="PostalCode" 
namespaceuri="urn:schemas-microsoft-com:office:smarttags"></o:SmartTagType><o:SmartTagType 
name="address" 
namespaceuri="urn:schemas-microsoft-com:office:smarttags"></o:SmartTagType><o:SmartTagType 
name="State" 
namespaceuri="urn:schemas-microsoft-com:office:smarttags"></o:SmartTagType><o:SmartTagType 
name="City" 
namespaceuri="urn:schemas-microsoft-com:office:smarttags"></o:SmartTagType><!--[if !mso]>
<STYLE>
st1\:*{behavior:url(#default#ieooui) }
</STYLE>
<![endif]-->
<STYLE>
<!--
 /* Font Definitions */
 @font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman";}
a:link, span.MsoHyperlink
        {color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {color:purple;
        text-decoration:underline;}
p
        {mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman";}
span.emailstyle19
        {font-family:Arial;
        color:navy;}
span.EmailStyle20
        {mso-style-type:personal-reply;
        font-family:Arial;
        color:navy;}
@page Section1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.Section1
        {page:Section1;}
-->
</STYLE>
<!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]--></HEAD>
<BODY lang=EN-US vLink=purple link=blue bgColor=white>
<DIV><FONT size=2>We regularly publish papers using Rasch on attitudes towards 
and of Expert Witness.&nbsp; I can send you the references if you like.&nbsp; I 
think that reliability is built into one of the Rasch tables.</FONT></DIV>
<DIV><FONT size=2></FONT>&nbsp;</DIV>
<DIV>My Best,</DIV>
<DIV>&nbsp;</DIV>
<DIV>Michael Lamport Commons, Ph.D.<BR>Assistant Clinical Professor<BR>Program 
in Psychiatry and the Law<BR>Department of Psychiatry<BR>Harvard Medical 
School<BR>Beth Israel Deaconess Medical Center<BR>234 Huron Avenue<BR>Cambridge, 
MA 02138-1328</DIV>
<DIV>&nbsp;</DIV>
<DIV>Telephone (617) 497-5270<BR>Facsimile (617) 491-5270<BR><A 
href="mailto:Commons@tiac.net">Commons@tiac.net</A><BR><A 
href="http://dareassociation.org/">http://dareassociation.org/</A></DIV>
<DIV>&nbsp;</DIV>
<DIV><BR>&nbsp;</DIV>
<BLOCKQUOTE 
style="PADDING-RIGHT: 0px; PADDING-LEFT: 5px; MARGIN-LEFT: 5px; BORDER-LEFT: #000000 2px solid; MARGIN-RIGHT: 0px">
  <DIV style="FONT: 10pt arial">----- Original Message ----- </DIV>
  <DIV 
  style="BACKGROUND: #e4e4e4; FONT: 10pt arial; font-color: black"><B>From:</B> 
  <A title=jbjorner@qualitymetric.com 
  href="mailto:jbjorner@qualitymetric.com">Jakob Bjorner</A> </DIV>
  <DIV style="FONT: 10pt arial"><B>To:</B> <A title=reeveb@mail.nih.gov 
  href="mailto:reeveb@mail.nih.gov">Reeve, Bryce (NIH/NCI) [E]</A> ; <A 
  title=mcwong@cuhk.edu.hk href="mailto:mcwong@cuhk.edu.hk">Eric Wong</A> ; <A 
  title=rasch@acer.edu.au href="mailto:rasch@acer.edu.au">rasch@acer.edu.au</A> 
  </DIV>
  <DIV style="FONT: 10pt arial"><B>Sent:</B> Thursday, October 05, 2006 8:44 
  AM</DIV>
  <DIV style="FONT: 10pt arial"><B>Subject:</B> RE: [Rasch] Incredible comments 
  on Rasch</DIV>
  <DIV><BR></DIV>
  <DIV class=Section1>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">Dear 
  Eric,<o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">In my opinion, the 
  two sentences:<o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face="Times New Roman" size=3><SPAN 
  style="FONT-SIZE: 12pt">‘The proposed validation analysis (using Rasch 
  modelling) is not appropriate for a questionnaire focusing on attitude and 
  behaviour and should be revised.’</SPAN></FONT><FONT face=Arial color=navy 
  size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial"><o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">And 
  <o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">‘… 
  </SPAN></FONT>Rasch analysis for the valdiation/reduction of items is not 
  appropriate because the items on attitude or usage do not have a linear order, 
  unlike educational assessment …’<o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">represent a 
  misunderstanding of the Rasch model. Certainly, Rasch models can be used to 
  analyze questionnaires on attitude and behavior. However, Rasch analysis can 
  be applied in many different ways, some of which may be more or less helpful 
  depending on the situation. E.g. some researchers would estimate the location 
  parameter (mean of the item thresholds) for each item and exclude items that 
  had location parameters too similar to other items. That may be a good 
  strategy if you want a test with a clear hierarchical order of items, but may 
  not be a good idea in the present situation. It seems to me that the reviewers 
  are taking issue with such an approach. However, that is only one way to use 
  the Rasch model. Mathematically, the model can still be valid, even if all 
  items have the same location (this is the sort of test you would want in a 
  fail-pass situation).<o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">I agree with Bryce 
  and the reviewers that know group comparison, concurrent validity, and 
  construct/criterion validity can be valuable additions to a Rasch analysis. 
  These approaches are not mutually exclusive.<o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">Hope this 
  helps.<o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">Jakob<o:p></o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial size=2><SPAN 
  style="FONT-SIZE: 10pt; FONT-FAMILY: Arial"><o:p>&nbsp;</o:p></SPAN></FONT></P>
  <DIV>
  <P class=MsoNormal><FONT face=Arial color=black size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: black; FONT-FAMILY: Arial">Jakob Bue Bjorner, 
  MD, PhD<BR>Chief Science Officer<BR>QualityMetric Incorporated<BR><st1:address 
  w:st="on"><st1:Street w:st="on">640 George Washington Highway, Suite 
  201</st1:Street> <BR><st1:City w:st="on">Lincoln</st1:City>, <st1:State 
  w:st="on">RI</st1:State>&nbsp; <st1:PostalCode 
  w:st="on">02865</st1:PostalCode></st1:address><BR>Phone: (401) 334-8800, ext. 
  271<BR>Fax: (401) 334-8801<BR></SPAN></FONT><FONT face=Arial color=navy 
  size=2><SPAN style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial"><A 
  title="blocked::BLOCKED::mailto:jbjorner@qualitymetric.com&#10;blocked::mailto:jbjorner@qualitymetric.com&#10;mailto:jbjorner@qualitymetric.com" 
  href="blocked::BLOCKED::mailto:jbjorner@qualitymetric.com">jbjorner@qualitymetric.com</A></SPAN></FONT><FONT 
  face=Arial color=blue size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: blue; FONT-FAMILY: Arial"> 
  <BR></SPAN></FONT><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial"><A 
  title="blocked::BLOCKED::http://www.qualitymetric.com/&#10;blocked::http://www.qualitymetric.com/&#10;http://www.qualitymetric.com/" 
  href="blocked::BLOCKED::http://www.qualitymetric.com/">www.qualitymetric.com</A><BR></SPAN></FONT><FONT 
  face=Arial color=black size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: black; FONT-FAMILY: Arial"><A 
  title="http://www.sf-36.org/&#10;blocked::http://www.sf-36.org&#10;http://www.sf-36.org" 
  href="http://www.sf-36.org">www.sf-36.org</A></SPAN></FONT><o:p></o:p></P></DIV>
  <DIV>
  <DIV class=MsoNormal style="TEXT-ALIGN: center" align=center><FONT 
  face="Times New Roman" size=3><SPAN style="FONT-SIZE: 12pt">
  <HR tabIndex=-1 align=center width="100%" SIZE=2>
  </SPAN></FONT></DIV>
  <P class=MsoNormal><B><FONT face=Tahoma size=2><SPAN 
  style="FONT-WEIGHT: bold; FONT-SIZE: 10pt; FONT-FAMILY: Tahoma">From:</SPAN></FONT></B><FONT 
  face=Tahoma size=2><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: Tahoma"> 
  rasch-bounces@acer.edu.au [mailto:rasch-bounces@acer.edu.au] <B><SPAN 
  style="FONT-WEIGHT: bold">On Behalf Of </SPAN></B>Reeve, Bryce (NIH/NCI) 
  [E]<BR><B><SPAN style="FONT-WEIGHT: bold">Sent:</SPAN></B> Friday, September 
  29, 2006 1:21 PM<BR><B><SPAN style="FONT-WEIGHT: bold">To:</SPAN></B> Eric 
  Wong; rasch@acer.edu.au<BR><B><SPAN 
  style="FONT-WEIGHT: bold">Subject:</SPAN></B> RE: [Rasch] Incredible comments 
  on Rasch</SPAN></FONT><o:p></o:p></P></DIV>
  <P class=MsoNormal><FONT face="Times New Roman" size=3><SPAN 
  style="FONT-SIZE: 12pt"><o:p>&nbsp;</o:p></SPAN></FONT></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">Dear Eric and 
  colleagues,</SPAN></FONT><o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">&nbsp;</SPAN></FONT><o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">I do not know what 
  you proposed, but from the comments below it seems like they are saying that a 
  full validation of the IMAQ questionnaire should include a number of different 
  validation methodologies/strategies, not just Rasch analysis. &nbsp;I agree, 
  Rasch analysis gives you some information but not the full picture. &nbsp;In 
  validating the IMAQ, you should consider the questionnaire’s construct 
  validity (e.g., convergent and divergent validity), content validity, and 
  criterion validity. &nbsp;These different types of validation require 
  different methods.&nbsp; By itself, one method does not address all aspects of 
  questionnaire validation.</SPAN></FONT><o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">&nbsp;</SPAN></FONT><o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">Sincerely,</SPAN></FONT><o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">-Bryce</SPAN></FONT><o:p></o:p></P>
  <P class=MsoNormal><FONT face=Arial color=navy size=2><SPAN 
  style="FONT-SIZE: 10pt; COLOR: navy; FONT-FAMILY: Arial">&nbsp;</SPAN></FONT><o:p></o:p></P>
  <DIV>
  <DIV class=MsoNormal style="TEXT-ALIGN: center" align=center><FONT 
  face="Times New Roman" size=3><SPAN style="FONT-SIZE: 12pt">
  <HR tabIndex=-1 align=center width="100%" SIZE=2>
  </SPAN></FONT></DIV>
  <P class=MsoNormal><B><FONT face=Tahoma size=2><SPAN 
  style="FONT-WEIGHT: bold; FONT-SIZE: 10pt; FONT-FAMILY: Tahoma">From:</SPAN></FONT></B><FONT 
  face=Tahoma size=2><SPAN style="FONT-SIZE: 10pt; FONT-FAMILY: Tahoma"> Eric 
  Wong [mailto:mcwong@cuhk.edu.hk] <BR><B><SPAN 
  style="FONT-WEIGHT: bold">Sent:</SPAN></B> Friday, September 29, 2006 5:16 
  AM<BR><B><SPAN style="FONT-WEIGHT: bold">To:</SPAN></B> 
  rasch@acer.edu.au<BR><B><SPAN style="FONT-WEIGHT: bold">Subject:</SPAN></B> 
  [Rasch] Incredible comments on Rasch<BR><B><SPAN 
  style="FONT-WEIGHT: bold">Importance:</SPAN></B> 
  High</SPAN></FONT><o:p></o:p></P></DIV>
  <P class=MsoNormal><FONT face="Times New Roman" size=3><SPAN 
  style="FONT-SIZE: 12pt">&nbsp;<o:p></o:p></SPAN></FONT></P>
  <BLOCKQUOTE style="MARGIN-TOP: 5pt; MARGIN-BOTTOM: 5pt">
    <DIV>
    <P class=MsoNormal><FONT face="Times New Roman" size=3><SPAN 
    style="FONT-SIZE: 12pt">Dear all,<BR><BR>Unbelievable comments from 
    reviewers of a research grant review board:<BR><BR>"The questionnaire should 
    be shortened. The proposed validation analysis (using Rasch modelling) is 
    not appropriate for a questionnaire focusing on attitude and behaviour and 
    should be revised."<BR><BR>"The methods proposed for the adpatation of the 
    content of the IMAQ (the questionnaire) are well written, but Rasch analysis 
    for the valdiation/reduction of items is not appropriate because the items 
    on attitude or usage do not have a linear order, unlike educational 
    assessment. More standard methods, such as know group comparison or 
    concurrent validity, for validating the construct/criterion validity of the 
    IMAQ should be used."<BR><BR><STRONG><B><FONT face="Times New Roman" 
    color=maroon><SPAN style="COLOR: maroon">Any 
    comments?</SPAN></FONT></B></STRONG><o:p></o:p></SPAN></FONT></P></DIV>
    <DIV>
    <P class=MsoNormal><FONT face="Times New Roman" size=3><SPAN 
    style="FONT-SIZE: 12pt">&nbsp;<o:p></o:p></SPAN></FONT></P></DIV>
    <DIV>
    <P class=MsoNormal><FONT face="Times New Roman" size=3><SPAN 
    style="FONT-SIZE: 12pt">Eric <o:p></o:p></SPAN></FONT></P></DIV></BLOCKQUOTE>
  <P style="MARGIN-BOTTOM: 12pt"></X-SIGSEP><FONT face="Times New Roman" 
  size=3><SPAN 
  style="FONT-SIZE: 12pt">&nbsp;<o:p></o:p></SPAN></FONT></P><X-SIGSEP></DIV>
  <P>
  <HR>

  <P></P>_______________________________________________<BR>Rasch mailing 
  list<BR>Rasch@acer.edu.au<BR>http://mailinglist.acer.edu.au/mailman/listinfo/rasch<BR></BLOCKQUOTE></BODY></HTML>