<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:x="urn:schemas-microsoft-com:office:excel" xmlns:p="urn:schemas-microsoft-com:office:powerpoint" xmlns:oa="urn:schemas-microsoft-com:office:activation" xmlns:st1="urn:schemas-microsoft-com:office:smarttags" xmlns="http://www.w3.org/TR/REC-html40">

<head>
<meta http-equiv=Content-Type content="text/html; charset=us-ascii">
<meta name=Generator content="Microsoft Word 11 (filtered medium)">
<!--[if !mso]>
<style>
v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style>
<![endif]--><o:SmartTagType
 namespaceuri="urn:schemas-microsoft-com:office:smarttags" name="Street"/>
<o:SmartTagType namespaceuri="urn:schemas-microsoft-com:office:smarttags"
 name="PostalCode"/>
<o:SmartTagType namespaceuri="urn:schemas-microsoft-com:office:smarttags"
 name="address"/>
<o:SmartTagType namespaceuri="urn:schemas-microsoft-com:office:smarttags"
 name="State"/>
<o:SmartTagType namespaceuri="urn:schemas-microsoft-com:office:smarttags"
 name="City"/>
<!--[if !mso]>
<style>
st1\:*{behavior:url(#default#ieooui) }
</style>
<![endif]-->
<style>
<!--
 /* Font Definitions */
 @font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman";}
a:link, span.MsoHyperlink
        {color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {color:purple;
        text-decoration:underline;}
p
        {mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman";}
span.emailstyle19
        {font-family:Arial;
        color:navy;}
span.EmailStyle20
        {mso-style-type:personal-reply;
        font-family:Arial;
        color:navy;}
@page Section1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.Section1
        {page:Section1;}
-->
</style>
<!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]-->
</head>

<body bgcolor=white lang=EN-US link=blue vlink=purple>

<div class=Section1>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Dear Eric,<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>In my opinion, the two sentences:<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>&#8216;The proposed validation analysis (using Rasch modelling) is not
appropriate for a questionnaire focusing on attitude and behaviour and should
be revised.&#8217;</span></font><font size=2 color=navy face=Arial><span
style='font-size:10.0pt;font-family:Arial;color:navy'><o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>And <o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>&#8216;&#8230; </span></font>Rasch
analysis for the valdiation/reduction of items is not appropriate because the
items on attitude or usage do not have a linear order, unlike educational
assessment &#8230;&#8217;<o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>represent a misunderstanding of the Rasch
model. Certainly, Rasch models can be used to analyze questionnaires on
attitude and behavior. However, Rasch analysis can be applied in many different
ways, some of which may be more or less helpful depending on the situation. E.g.
some researchers would estimate the location parameter (mean of the item
thresholds) for each item and exclude items that had location parameters too
similar to other items. That may be a good strategy if you want a test with a
clear hierarchical order of items, but may not be a good idea in the present
situation. It seems to me that the reviewers are taking issue with such an approach.
However, that is only one way to use the Rasch model. Mathematically, the model
can still be valid, even if all items have the same location (this is the sort
of test you would want in a fail-pass situation).<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>I agree with Bryce and the reviewers that know
group comparison, concurrent validity, and construct/criterion validity can be
valuable additions to a Rasch analysis. These approaches are not mutually
exclusive.<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Hope this helps.<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Jakob<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 face=Arial><span style='font-size:10.0pt;
font-family:Arial'><o:p>&nbsp;</o:p></span></font></p>

<div>

<p class=MsoNormal><font size=2 color=black face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:black'>Jakob Bue Bjorner, MD, PhD<br>
Chief Science Officer<br>
QualityMetric Incorporated<br>
<st1:address w:st="on"><st1:Street w:st="on">640 George Washington Highway,
  Suite 201</st1:Street> <br>
<st1:City w:st="on">Lincoln</st1:City>, <st1:State w:st="on">RI</st1:State>&nbsp;
 <st1:PostalCode w:st="on">02865</st1:PostalCode></st1:address><br>
Phone: (401) 334-8800, ext. 271<br>
Fax: (401) 334-8801<br>
</span></font><font size=2 color=navy face=Arial><span style='font-size:10.0pt;
font-family:Arial;color:navy'><a
href="blocked::BLOCKED::mailto:jbjorner@qualitymetric.com"
title="blocked::BLOCKED::mailto:jbjorner@qualitymetric.com&#10;blocked::mailto:jbjorner@qualitymetric.com&#10;mailto:jbjorner@qualitymetric.com">jbjorner@qualitymetric.com</a></span></font><font
size=2 color=blue face=Arial><span style='font-size:10.0pt;font-family:Arial;
color:blue'> <br>
</span></font><font size=2 color=navy face=Arial><span style='font-size:10.0pt;
font-family:Arial;color:navy'><a
href="blocked::BLOCKED::http://www.qualitymetric.com/"
title="blocked::BLOCKED::http://www.qualitymetric.com/&#10;blocked::http://www.qualitymetric.com/&#10;http://www.qualitymetric.com/">www.qualitymetric.com</a><br>
</span></font><font size=2 color=black face=Arial><span style='font-size:10.0pt;
font-family:Arial;color:black'><a href="http://www.sf-36.org"
title="http://www.sf-36.org/&#10;blocked::http://www.sf-36.org&#10;http://www.sf-36.org">www.sf-36.org</a></span></font><o:p></o:p></p>

</div>

<div>

<div class=MsoNormal align=center style='text-align:center'><font size=3
face="Times New Roman"><span style='font-size:12.0pt'>

<hr size=2 width="100%" align=center tabindex=-1>

</span></font></div>

<p class=MsoNormal><b><font size=2 face=Tahoma><span style='font-size:10.0pt;
font-family:Tahoma;font-weight:bold'>From:</span></font></b><font size=2
face=Tahoma><span style='font-size:10.0pt;font-family:Tahoma'>
rasch-bounces@acer.edu.au [mailto:rasch-bounces@acer.edu.au] <b><span
style='font-weight:bold'>On Behalf Of </span></b>Reeve, Bryce (NIH/NCI) [E]<br>
<b><span style='font-weight:bold'>Sent:</span></b> Friday, September 29, 2006
1:21 PM<br>
<b><span style='font-weight:bold'>To:</span></b> Eric Wong; rasch@acer.edu.au<br>
<b><span style='font-weight:bold'>Subject:</span></b> RE: [Rasch] Incredible
comments on Rasch</span></font><o:p></o:p></p>

</div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'><o:p>&nbsp;</o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Dear Eric and colleagues,</span></font><o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>&nbsp;</span></font><o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>I do not know what you proposed, but from
the comments below it seems like they are saying that a full validation of the IMAQ
questionnaire should include a number of different validation
methodologies/strategies, not just Rasch analysis. &nbsp;I agree, Rasch
analysis gives you some information but not the full picture. &nbsp;In
validating the IMAQ, you should consider the questionnaire&#8217;s construct
validity (e.g., convergent and divergent validity), content validity, and
criterion validity. &nbsp;These different types of validation require different
methods.&nbsp; By itself, one method does not address all aspects of questionnaire
validation.</span></font><o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>&nbsp;</span></font><o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Sincerely,</span></font><o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>-Bryce</span></font><o:p></o:p></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>&nbsp;</span></font><o:p></o:p></p>

<div>

<div class=MsoNormal align=center style='text-align:center'><font size=3
face="Times New Roman"><span style='font-size:12.0pt'>

<hr size=2 width="100%" align=center tabindex=-1>

</span></font></div>

<p class=MsoNormal><b><font size=2 face=Tahoma><span style='font-size:10.0pt;
font-family:Tahoma;font-weight:bold'>From:</span></font></b><font size=2
face=Tahoma><span style='font-size:10.0pt;font-family:Tahoma'> Eric Wong
[mailto:mcwong@cuhk.edu.hk] <br>
<b><span style='font-weight:bold'>Sent:</span></b> Friday, September 29, 2006
5:16 AM<br>
<b><span style='font-weight:bold'>To:</span></b> rasch@acer.edu.au<br>
<b><span style='font-weight:bold'>Subject:</span></b> [Rasch] Incredible
comments on Rasch<br>
<b><span style='font-weight:bold'>Importance:</span></b> High</span></font><o:p></o:p></p>

</div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>&nbsp;<o:p></o:p></span></font></p>

<blockquote style='margin-top:5.0pt;margin-bottom:5.0pt'>

<div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>Dear all,<br>
<br>
Unbelievable comments from reviewers of a research grant review board:<br>
<br>
&quot;The questionnaire should be shortened. The proposed validation analysis
(using Rasch modelling) is not appropriate for a questionnaire focusing on
attitude and behaviour and should be revised.&quot;<br>
<br>
&quot;The methods proposed for the adpatation of the content of the IMAQ (the
questionnaire) are well written, but Rasch analysis for the
valdiation/reduction of items is not appropriate because the items on attitude
or usage do not have a linear order, unlike educational assessment. More
standard methods, such as know group comparison or concurrent validity, for
validating the construct/criterion validity of the IMAQ should be used.&quot;<br>
<br>
<strong><b><font color=maroon face="Times New Roman"><span style='color:maroon'>Any
comments?</span></font></b></strong><o:p></o:p></span></font></p>

</div>

<div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>&nbsp;<o:p></o:p></span></font></p>

</div>

<div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>Eric <o:p></o:p></span></font></p>

</div>

</blockquote>

<p style='margin-bottom:12.0pt'></X-SIGSEP><font size=3 face="Times New Roman"><span
style='font-size:12.0pt'>&nbsp;<o:p></o:p></span></font></p>

<X-SIGSEP></div>

</body>

</html>