<HTML><BODY style="word-wrap: break-word; -khtml-nbsp-mode: space; -khtml-line-break: after-white-space; "><DIV>While I agree that a larger item pool may reduce the effects of wholesale exposure (item bank transparency), I am not convinced that it will be testing the same thing as secure item bank might test.</DIV><DIV><BR class="khtml-block-placeholder"></DIV>A problem that is presented fresh is a real problem that can test conceptual understanding, procedural mastery, and domain power (e.g., mathematical power).   When you expose the item bank, you are now confounding this domain power with memory and recall.  In mathematics, a problem that has been reviewed and a solution examined is no longer a real problem - rather it is an exercise - often with a significantly diminished difficulty. <DIV><BR class="khtml-block-placeholder"></DIV><DIV>I would expect that the items would drift in the negative direction, and also that the discrimination of the items would degrade.  The latter would be as a result of inconsistent review of items and inconsistent memories.  These changes would also be inconsistent from item to item and depend upon how memorable the items and their solutions were.</DIV><DIV><BR class="khtml-block-placeholder"></DIV><DIV>Tim</DIV><BR><DIV><DIV>On 11-Oct-06, at 11:30 AM, Agustin Tristan wrote:</DIV><BR class="Apple-interchange-newline"><BLOCKQUOTE type="cite"><DIV>Hello Iasonas.</DIV>  <DIV>I think the main question is not if the items are multiple choice or open responses with an item bank. In many countries (including Mexico and other Latin American countries), some people say that there is no reason to have the item bank under so high security measures, they believe that if you publish (in a book, on the web or whatever other media, that is not the issue) for instance a bank of 300 questions (or 100 or 1000, that is not the issue either) and if the students are able to "learn" (mostly to memorize) the 300 questions this is a good thing, they say this is preferable than to have a student who doesn't know anything....300 memorized questions is better than nothing, so when they will face the test (a subset of these questions) they will obtain high notes, they will show the higher stakes, and our national education will improve.</DIV>  <DIV> </DIV>  <DIV>I hope you may see the falacies of this reasoning.</DIV>  <DIV>If the national education system tries to develop abilities, knowledge and competencies in our students, a certain part of this knowledge is produced using the memory, BUT not to memorize 300 items, education is more than that.</DIV>  <DIV>For instance:</DIV>  <DIV>If the system wishes to develop critical thinking, and the items in the bank concern this ability, BUT the student did memorize the items, they will use the memory but will not develop critical thinking.</DIV>  <DIV>Repeat the same argument with other abilities and objectives of the national education system and you will see that an "open" item bank is a wrong solution.</DIV>  <DIV> </DIV>  <DIV>One of the main falacies is that people needs to know THE ITEMS, I agree they need to know the areas, subjects, topics, level of complexity, but not the item. For instance if the doctor asks me to do a blood analysis to measure several substances and organic parameters, I have to know several things concerning the test: I don't have to eat at least for 12 hours before the test (or 6 or whatever previous time), and I don't have to drink alcohol or some other substances in a specific time, but if you drink or eat something, you may provide false results (in favor or against you). I hope to have a healthy situation, but I don't do anything specific to obtain false good results.  Why we expect this in our health and not in education? The educational test is like a medical test: I wish to have a real and good "picture" of what I am able to do, to know, to produce...in many countries and places, persons wants to get good results, not a good picture. If everybody obtain good results, but this is not true, how can we improve the educational situation of our students?  The test is the mean not the goal.</DIV>  <DIV> </DIV>  <DIV>We have the idea to educate people and evaluate people for a specific purpose, I expect that to get high scores in a test is not the main purpose of education.</DIV>  <DIV> </DIV>  <DIV>Hope this helps.</DIV>  <DIV>Agustin.</DIV>  <DIV> </DIV>  <DIV> </DIV>  <DIV> </DIV>  <DIV> </DIV>  <DIV><BR> </DIV><BR><BR><DIV><FONT color="#0000bf"><STRONG>FAMILIA DE PROGRAMAS KALT. </STRONG></FONT></DIV> <DIV>Mariano Jiménez 1830 A </DIV> <DIV>Col. Balcones del Valle </DIV> <DIV>78280, San Luis Potosí, S.L.P. México </DIV> <DIV>TEL (52) 44-4820 37 88, 44-4820 04 31 </DIV> <DIV>FAX (52) 44-4815 48 48 </DIV> <DIV>web page (in Spanish AND ENGLISH): <FONT color="#c00000"><STRONG><A href="http://www.ieesa-kalt.com">http://www.ieesa-kalt.com</A></STRONG></FONT></DIV><DIV>                                   <BR class="khtml-block-placeholder"></DIV><HR size="1">Get your own <A href=" http://us.rd.yahoo.com/evt=43290/*http://smallbusiness.yahoo.com/domains">web address for just $1.99/1st yr</A>. We'll help. <A href="http://us.rd.yahoo.com/evt=41244/*http://smallbusiness.yahoo.com/">Yahoo! Small Business</A>.<DIV style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; ">_______________________________________________</DIV><DIV style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; ">Rasch mailing list</DIV><DIV style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; "><A href="mailto:Rasch@acer.edu.au">Rasch@acer.edu.au</A></DIV><DIV style="margin-top: 0px; margin-right: 0px; margin-bottom: 0px; margin-left: 0px; "><A href="http://mailinglist.acer.edu.au/mailman/listinfo/rasch">http://mailinglist.acer.edu.au/mailman/listinfo/rasch</A></DIV> </BLOCKQUOTE></DIV><BR><DIV> <SPAN class="Apple-style-span" style="border-collapse: separate; border-spacing: 0px 0px; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; text-align: auto; -khtml-text-decorations-in-effect: none; text-indent: 0px; -apple-text-size-adjust: auto; text-transform: none; orphans: 2; white-space: normal; widows: 2; word-spacing: 0px; "><DIV>---</DIV><DIV>Tim Pelton,</DIV><DIV>Department of Curriculum and Instruction</DIV><DIV>University of Victoria</DIV><DIV>PO Box 3010 STN CSC</DIV><DIV>Victoria BC V8W 3N4</DIV><DIV>tel 250-721-7803, fax 250-721-7598</DIV><DIV>---</DIV><DIV>"Any fool can know. The point is to understand." -Albert Einstein</DIV><DIV><BR class="khtml-block-placeholder"></DIV><DIV><BR class="khtml-block-placeholder"></DIV><BR class="Apple-interchange-newline"></SPAN> </DIV><BR></BODY></HTML>