Greg<br><br>A few years ago I advised on a project where we assessed satisfaction in an educational setting in one year, to establsih a scale of satisfaction.&nbsp; This was based on a large set of pooled items (each campus could administer a different set of items, but included a common core set of items).&nbsp; One of the purposes of the scale was to identify areas where students
were not satisfied, and to implement changes to address these areas. We were to go back a few years later, re-assess with a different cohort of students, and look for change.<br>i.e. we were using a calibrated scale to look for changes - a bit different to usual Rasch methodology.<br>
<br>The challenge was to first identify whetehr items on the scale had changed location (i.e. whetehr the intervention strategies had worked), and then to assess whether satisfaction poverall had changed.<br><br>First step - have the items changed?<br>
Several ideas suggested.&nbsp; One was to include the year or assessment time as a variable and investigate differential item functioning for this (and I prefer using RUMM for dif, as you get a visual which allows you to consider the whole range of &quot;ability&quot; rather than one overall statistic that can hide non-uniform dif).&nbsp; Another idea was to anchor the items from the first assessment, and then re-analyse and assess item fit for new application of items to the original scale.<br>
OIf you determine that the items have changed (location), then you treat them as separate items when looking for overall change.<br><br>Happy to discuss further if you like..<br><br>Regards<br><br><br>Juho<br><br><br><br>
Dr Juho Looveer<br>Edumetrics<br><a href="mailto:Juho.Looveer@gmail.com">Juho.Looveer@gmail.com</a><br><br><br><br><div class="gmail_quote">On Wed, Dec 3, 2008 at 12:00 PM,  <span dir="ltr">&lt;<a href="mailto:rasch-request@acer.edu.au">rasch-request@acer.edu.au</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">Send Rasch mailing list submissions to<br>
 &nbsp; &nbsp; &nbsp; &nbsp;<a href="mailto:rasch@acer.edu.au">rasch@acer.edu.au</a><br>
<br>
To subscribe or unsubscribe via the World Wide Web, visit<br>
 &nbsp; &nbsp; &nbsp; &nbsp;<a href="https://mailinglist.acer.edu.au/mailman/listinfo/rasch" target="_blank">https://mailinglist.acer.edu.au/mailman/listinfo/rasch</a><br>
or, via email, send a message with subject or body &#39;help&#39; to<br>
 &nbsp; &nbsp; &nbsp; &nbsp;<a href="mailto:rasch-request@acer.edu.au">rasch-request@acer.edu.au</a><br>
<br>
You can reach the person managing the list at<br>
 &nbsp; &nbsp; &nbsp; &nbsp;<a href="mailto:rasch-owner@acer.edu.au">rasch-owner@acer.edu.au</a><br>
<br>
When replying, please edit your Subject line so it is more specific<br>
than &quot;Re: Contents of Rasch digest...&quot;<br>
<br>
<br>
Today&#39;s Topics:<br>
<br>
 &nbsp; 1. Longitudinal Rasch (Petroski, Greg)<br>
<br>
<br>
----------------------------------------------------------------------<br>
<br>
Message: 1<br>
Date: Tue, 2 Dec 2008 12:27:07 -0600<br>
From: &quot;Petroski, Greg&quot; &lt;<a href="mailto:PetroskiG@health.missouri.edu">PetroskiG@health.missouri.edu</a>&gt;<br>
Subject: [Rasch] Longitudinal Rasch<br>
To: &lt;<a href="mailto:rasch@acer.edu.au">rasch@acer.edu.au</a>&gt;<br>
Message-ID:<br>
 &nbsp; &nbsp; &nbsp; &nbsp;&lt;<a href="mailto:0510DC719E56F64BB2AD84EE64CE6BAD02BB5931@UM-XMAIL06.um.umsystem.edu">0510DC719E56F64BB2AD84EE64CE6BAD02BB5931@UM-XMAIL06.um.umsystem.edu</a>&gt;<br>
Content-Type: text/plain; charset=&quot;us-ascii&quot;<br>
<br>
I know I asked a related question long ago but after after changing<br>
computers I can not fine the responses.<br>
<br>
I want to score an existing scale using the partial credit model and use<br>
these scores to examine change over time. &nbsp;This is a medical-type<br>
evaluation, is NOT a self-report, and the items are always the same.<br>
The final analysis will be complex with lots of covariates and a nested<br>
data structure, so I would like to score the tool with WinSteps or<br>
ConQuest, &nbsp;and use the save the trait estimates as the outcome in the<br>
subsequent analysis. &nbsp;What I am not sure of is how to handle the<br>
repeated measurements on the same people. Each participant will be<br>
evaluated at least four times. &nbsp;Here is my thinking,<br>
<br>
1) Ignore the time period and estimate model parameters and &quot;abilities&quot;<br>
just once as though the data was cross-sectional.<br>
<br>
2) N is large, so estimate the item parameters using the baseline<br>
assessment and treat them as fixed and estimate only abilities for each<br>
subsequent time point.<br>
 &nbsp; &nbsp; &nbsp; Two issues - &nbsp;Will the software I have do this? &nbsp;Does one need an<br>
equating step?<br>
<br>
3) Separate calibrations and use an equating procedure to put abilities<br>
on the same metric.<br>
<br>
3) Forget Rasch/IRT and use the summated score!<br>
<br>
Any and all thoughts are welcome.<br>
<br>
Gregory F. Petroski, PhD<br>
Office of Medical Research<br>
School of Medicine<br>
University of Missouri -Columbia<br>
Columbia, Mo. &nbsp;65212<br>
<br>
<br>
-------------- next part --------------<br>
An HTML attachment was scrubbed...<br>
URL: <a href="http://mailinglist.acer.edu.au/pipermail/rasch/attachments/20081202/b1333a7a/attachment-0001.html" target="_blank">http://mailinglist.acer.edu.au/pipermail/rasch/attachments/20081202/b1333a7a/attachment-0001.html</a><br>

<br>
------------------------------<br>
<br>
_______________________________________________<br>
Rasch mailing list<br>
<a href="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</a><br>
<a href="https://mailinglist.acer.edu.au/mailman/listinfo/rasch" target="_blank">https://mailinglist.acer.edu.au/mailman/listinfo/rasch</a><br>
<br>
<br>
End of Rasch Digest, Vol 41, Issue 1<br>
************************************<br>
</blockquote></div><br>