<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 12 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:"MS Mincho";
        panose-1:2 2 6 9 4 2 5 8 3 4;}
@font-face
        {font-family:"MS Mincho";
        panose-1:2 2 6 9 4 2 5 8 3 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
@font-face
        {font-family:"\@MS Mincho";
        panose-1:2 2 6 9 4 2 5 8 3 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p
        {mso-style-priority:99;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>Dr. Linacre,<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>I was wondering if you could lead me to studies that have used group-anchoring so that ratee abilities can be comparable across disjoin subsets.&nbsp; I tried to find an example, but have hard time to find any because of my unfamiliarity of this method.<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>Kenji<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><div style='border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in'><p class=MsoNormal><b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'>From:</span></b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'> rasch-bounces@acer.edu.au [mailto:rasch-bounces@acer.edu.au] <b>On Behalf Of </b>Mike Linacre<br><b>Sent:</b> Wednesday, December 21, 2011 1:08 AM<br><b>To:</b> rasch@acer.edu.au<br><b>Subject:</b> Re: [Rasch] Calibrating ratee ability and rater leniency/severity with data not connected<o:p></o:p></span></p></div><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Thank you for your questions, Kenji Yamazaki.<br><br>Your experimental design includes a 20-item instrument that was used everywhere (good). But there are 12 separate resident programs. Each has its own attending physicians (raters) and residents (ratees). The main purpose is to compare resident performance levels.<br><br>In this design, there are 12 disjoint subsets of ratings corresponding to the 12 resident programs. To make the measures of the 12 programs comparable, we must make some assumptions:<br><br>If we want to compare ratee abilities across programs, then we assume that the 12 samples of raters have the same mean leniency. In Facets, group-anchor the 12 groups of raters (attending physicians) at the same value, usually zero. Non-center the ratee facet.<br><br>Since the same 20 items are used everywhere, no additional action is required to make the item difficulties comparable everywhere. <br><br>Alternatively, if we want to compare raters severities/leniencies across programs, then we assume that the 12 samples of ratees have the same mean ability.<br><br>OK?<br><br>Mike L.<o:p></o:p></p><p>Mike Linacre<br>Editor, Rasch Measurement Transactions<br>rmt@rasch.org <a href="http://www.rasch.org/rmt/">www.rasch.org/rmt/</a> Latest RMT: 25:3 Winter 2011<o:p></o:p></p></div></body></html>