روبریک سنجش کلاسی عادلانه: برازش مدل چندبعدی پاسخ مدرج (مقاله علمی وزارت علوم)
درجه علمی: نشریه علمی (وزارت علوم)
آرشیو
چکیده
هدف پژوهش حاضر بررسی ویژگی های روان سنجی روبریک سنجش کلاسی عادلانه بر اساس نظریه سؤال- پاسخ بود؛ به این منظور نمونه ای شامل 511 دانشجوی دانشگاه تهران به روش نمونه گیری در دسترس انتخاب شدند و به سؤال های روبریک پاسخ دادند. در این مرحله و به منظور تعیین کاربرد مدل های تک بعدی یا چندبعدی، روش های دیتکت و تحلیل موازی به کار رفت که نتایج هر دو روش، تک بعدی بودن داده ها را رد کرده و نتایج حاصل از تحلیل موازی نشان دهنده استخراج سه عامل از داده ها بود. همچنین مقایسه شاخص های برازش مدل تک بعدی و چندبعدی شامل لگاریتم درستنمایی، نسبت درستنمایی، ریشه دوم میانگین مربعات باقی مانده و مقایسه ملاک های اطلاعات بیزی و آکایک برازش بهتر مدل چندبعدی برای داده ها را تائید کرد. به این ترتیب و با توجه به چندارزشی بودن پاسخ سؤال ها، مدل چندبعدی پاسخ مدرج برای برآورد پارامترهای سؤال ها به کار رفت. پایایی هر یک از زیرمقیاس های عدالت رویه ای، ماهیت سنجش و عدالت تعاملی به ترتیب 85/0، 69/0 و 63/0 به دست آمد. برآورد پارامترهای تمیز سؤال ها در دامنه 048/1 تا 802/5 قرار داشت که نشان داد همه سؤال ها در تمیز سطوح بالا و پایین سنجش کلاسی عادلانه به خوبی عمل می کنند و بعد از کنترل نرخ کشف اشتباه، آماره S-X2 مؤید برازش خوب همه سؤال های روبریک بود. درمجموع، نتایج این پژوهش نشان دهنده آن است که روبریک تدوین شده دارای ویژگی های روان سنجی مناسبی برای ارزشیابی کیفیت عدالت در سنجش کلاسی اساتید است.Fair Classroom Assessment Rubric: Fitting a Multidimensional Graded Response Model
The present study aimed to investigate the psychometric properties of fair classroom assessment Rubric based on Item-Response theory. For this purpose, a sample of 511 students of the University of Tehran was selected by the available sampling method and answered Rubric questions. At this stage, to determine the application of unidimensional or multidimensional models, DETECT and parallel analysis methods were used. The results of both methods rejected the unidimensionality of the data and the results of the parallel analysis showed the extraction of three factors from the data. Also, the comparison of unidimensional and multidimensional model fit indices including log-likelihood, likelihood ratio, Root Mean Square Error of Approximation and comparison of Bayesian and Akaike information criteria confirmed the better fit of the multidimensional model for the data. Thus, due to the polytomous of the answers to the questions, the multidimensional graded response model was used to estimate the parameters of the questions. The reliability of each of the subscales of procedural fairness, nature of assessment and interactional fairness were 0.85, 0.69 and 0.63, respectively. Estimation of the discrimination parameters ranged from 1.048 to 5.802, which showed that all the questions performed well in the discrimination of the upper and lower levels of the fair classroom assessment, and after controlling the false discovery rate, the S-X2 statistic showed a good fit of all Rubric questions. In general, the results of this study show that the developed Rubric has appropriate psychometric properties to evaluate the quality of fairness in the classroom assessment.
تبلیغات
