هم ترازسازی و پیوند نمرات در آزمون های سراسری (مقاله علمی وزارت علوم)
درجه علمی: نشریه علمی (وزارت علوم)
آرشیو
چکیده
هدف: بنا به مصوبه شورای عالی انقلاب فرهنگی قرار است سازمان سنجش در سال دو بار آزمون سراسری برگزار کند و نمره هر آزمون تا دو سال اعتبار خواهد داشت. هدف این پژوهش معرفی و اجرای روش های مناسب هم ترازی در چهارچوب تئوری کلاسیک آزمون سازی است تا بتوان نمرات آزمون های دوره های مختلف را مقایسه کرد و بر اساس آنها دانشجویان را به شیوه ای عادلانه انتخاب کرد.روش پژوهش: بر اساس طرح گروه های نابرابر با سوالات مشترک سه فرم آزمون X ، Y و Z حساب دیفرنسیل روی 3 گروه 600، 1111 و 2200 نفری به طور آزمایشی اجرا شده. تعداد سوال هر فرم در کل 21، 21 و 20 به ترتیب هر کدام با 6 سوال مشترک بوده است. داده ها در نرم افزار R با پکیج equate (آلبانو، 2018) تحلیل شده اند. تابع هم ترازی هم صدک برای هم ترازکردن این فرم ها به کار رفته؛ فرایند پیش هم وارسازی با تبدیلات لگاریتم خطی صورت گرفته تا پارامترها با خطای معیار کمتر و نمرات با دقت بیشری برآورد شوند.یافته ها: میانگین دشواری این سه فرم آزمون X ، Y و Z به ترتیب، 03/9، 61/7 و 79/7 است. هم چنین هر سه فرم دارای چولگی متفاوت به ترتیب 20/0، 52/0 و 39/0 می باشد.نتیجه گیری: در طرح گروه های نابرابر به دلیل دشواری متفاوت فرمهای آزمون ها نیازمند سوالات مشترک است و چولگی راست توزیع نمرات مستلزم استفاده از تابع هم ترازی هم صدک به عنوان مناسب ترین تابع برای هم ترازکردن نمرات است؛ برای آزمون هایی که نمی توان سوالات مشترک تهیه کرد، پیشنهاد می شود به دلیل چولگی راست توزیع نمرات با همان تابع هم ترازی هم صدک آنها را پیوند داد.Equating and Linking Scores in National Exams
Objective: According to the approval of the Supreme Council of Cultural Revolution the National Organization of Educational Testing is supposed to hold a national exam twice a year and the score of each test would have credit for two years. The purpose of this research is to introduce and implement appropriate methods of equating in the framework of the classical test theory in order to compare the test scores of different courses to choose applicants in a fair way.Methods: Based on common-item nonequivalent groups design three test forms X, Y and Z of differential calculus were experimentally implemented on the group of 600, 1111 and 2200 examinees. The number of test items were 21, 21 and 20 with six common item in total. Data were analyzed in R software with the package equate (Albano & Albano, 2018). The equipercentile function was used to equate the test forms; The pre-smoothing process with linear logarithmic transformations were done so that the parameters were estimated with less standard error and scores with more accuracy.Results: The average difficulty of these test forms were 9.03, 7.61 and 7.79 respectively. Also, all three forms have different skewness 0.203, 0.518 and 0.392, respectively.Conclusion: Due to the different difficulty and right skewness of the distribution of the tests scores, it is suggested to equate them with the equipercentile function in a nonequivalent anchor test design. The tests for which common item cannot be developed, it is recommended to link their scores by the same equipercentile function.
تبلیغات
