<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2//EN">
<HTML>
<HEAD>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=iso-8859-1">
<META NAME="Generator" CONTENT="MS Exchange Server version 6.5.7652.24">
<TITLE>RE: [Rasch] Models of unidimensional constructs have their limitations: what is a &quot;good thing&quot;?</TITLE>
</HEAD>
<BODY>
<!-- Converted from text/plain format -->

<P><FONT SIZE=2>I believe this conversation is on track!&nbsp; Just as &quot;reading comprehension&quot; was bogged down in a complex search for &quot;variables&quot; when Lou Bashaw and Jack Stenner envisioned a usable measure that spurred a new wave of research, Rasch &quot;forces&quot; the scale to understand and map the relevant construct at a targeted level.<BR>
<BR>
Judy Wilkerson and I also witnessed an endless and unresolvable debate about the complexities of &quot;teacher dispositions&quot; based on morals, ethics, and personality that resulted in useless attempts to measure the construct.&nbsp; (See &quot;Teacher Dispositions: Building a Teacher Education Framework of Moral Standards&quot;, &quot;Teacher Dispositions: Envisioning Their Role in Education&quot;, and &quot;Dispostions in Teacher Education&quot; - all recent books.)&nbsp; Decades of debate could not deconstruct the variables.&nbsp; The solution was to validate job-related and predictive measures based on a defined and mapped construct that doesn't attempt to sub-divide all the possible variables. (I hope that Lou realizes that I was listening in that class!)<BR>
<BR>
Now that the disposition scales are becoming available, appropriate research and discussion make sense.&nbsp; Without the measures, you have an endless &quot;factor analysis nightmare&quot; based on any individual's idea du jour.&nbsp; Until a useful measure at some useful dimensional level starts the process, it is unlikely that a synthesis of &quot;stuff&quot; will magically become useful.&nbsp; I think this appears to happen in personality, theories of creativity, theories of intelligence, and likely some of the health care measures. (Does anyone remember the Functional Independence Measure discussion on thresholds in rmt?)<BR>
<BR>
When the &quot;model&quot;, such as 3PL, allows the measures to &quot;play around&quot; with the parameters so that there is a false fit, you are off on the invalidity slippery slope.&nbsp; Rasch seems (to me) to force the measures to explain the construct AT THE LEVEL OF INTEREST.&nbsp; Once it is working, there are plenty of opportunities (FACETS, etc.) to break down and aggregate the real constituent parts!<BR>
<BR>
More importantly to those of us who are looking at &quot;complex human variables&quot;, it is the DPF analysis that seems to inform the construct interpretation in ways that simply are not envisioned in the original scale development!&nbsp; If you look at &quot;Item Response Theory&quot; (Baker &amp; Kim) or &quot;Item Response Theory for Psychologists&quot; (Embretson &amp; Reise), you hardly see any mention of keyforms, kidmaps, or construct maps that are familiar to us Rasch folks.&nbsp; I don't think you can EVER VALIDATE (or interpret) the construct or sub-constructs of these complex variables without the person profiles which are completely confounded in 2PL and 3PL models!<BR>
<BR>
Judy and I will repeat, &quot;Rasch puts the people in assessment&quot;.&nbsp; If you can't develop the valid unidimensional constructs at some useful level (especially complex human ones), then you'll likely never have the research tools that encourage one to break out of the tail-chasing debates and identify the &quot;real variables&quot; that actually exist in the data.<BR>
<BR>
This is entirely applied and practical, regardless of the mathematical logic of sufficiency, specific objectivity, and independence even though I'm glad that others more talented than me have provided that logic.<BR>
<BR>
Steve Lang<BR>
University of South Florida St. Petersburg<BR>
<BR>
<BR>
-----Original Message-----<BR>
From: rasch-bounces@acer.edu.au on behalf of Rod O'Connor<BR>
Sent: Tue 11/6/2007 12:25 AM<BR>
To: Trevor Bond; rasch@acer.edu.au<BR>
Subject: Re: [Rasch] Models of unidimensional constructs have their limitations<BR>
<BR>
Hello Trevor, very nice to hear from you (I recall your earlier<BR>
assistance...).<BR>
<BR>
I have no doubt one could fit global HQoL data to a single Rasch scale<BR>
(any notion can be/is one construct, and multiple items can generally be<BR>
identified), however I fear that people might think this is<BR>
automatically a good thing and that having done so the healthcare<BR>
researcher has 'done their job'.&nbsp; Unfortunately in principle such a<BR>
scale might not be particularly helpful in 'improving healthcare',<BR>
potentially offering little more than a 'do you feel better' question<BR>
(except the scale would have more than one item).&nbsp; My view is that a<BR>
HQoL measure useful for healthcare improvement needs to not only provide<BR>
an indication of extent but also play a diagnostic role (allow<BR>
'formative' as well as 'summative' evaluation), identifying where and<BR>
how a change has occurred, and hence where treatment could usefully be<BR>
targeted.<BR>
<BR>
Of course it all depends on the criteria by which one would assess<BR>
success for the measure, which should always be set-up first.&nbsp;<BR>
Personally I think an overtly multi-dimensional assessment is likely to<BR>
be needed, with an accompanying complex scoring/combination rule to<BR>
predict values consistent with patient judgement.<BR>
<BR>
Warm regards,<BR>
Rod<BR>
<BR>
<BR>
_Trevor Bond said the following on 6/11/2007 3:34 PM:_<BR>
&gt; mea culpa...denied not denied (sorry Dr Freud...it was a slip)<BR>
&gt;&gt; Dear Rod<BR>
&gt;&gt; HRQoL is one of the areas where Rasch is having a major impact, if I<BR>
&gt;&gt; can judge by the articles I am asked to review.<BR>
&gt;&gt; Are multidimensional states a composite of unidimensional states?<BR>
&gt;&gt; Why would we ever expect that any human condition could be DEFINED by<BR>
&gt;&gt; one dimension?<BR>
&gt;&gt; thanks for your prompt!<BR>
&gt;&gt; TGB<BR>
&gt;<BR>
_______________________________________________<BR>
Rasch mailing list<BR>
Rasch@acer.edu.au<BR>
<A HREF="http://mailinglist.acer.edu.au/mailman/listinfo/rasch">http://mailinglist.acer.edu.au/mailman/listinfo/rasch</A><BR>
<BR>
</FONT>
</P>

</BODY>
</HTML>