تحلیل بعدیت، اثر متن، تأثیر و کارکرد افتراقی سؤال در آزمون های مبتنی بر متن (مقاله علمی وزارت علوم)
درجه علمی: نشریه علمی (وزارت علوم)
آرشیو
چکیده
این مطالعه با هدف بررسی اثر تک زبانه، دوزبانه بودن دانش آموزان ایرانی بر بعدیت، وابستگی مکانی سؤال، تأثیر و کارکرد افتراقی سؤال متن های مطالعه پرلز 2011 انجام گرفت. بعدیت با مقایسه مدل تک بعدی پاسخ مدرج شده با مدل دوعاملی چندبعدی نظریه سؤال-پاسخ، تأثیر و وابستگی مکانی سؤال با استفاده از مدل دوسطحی دوعاملی و کارکرد افتراقی سؤال با مدل دوعاملی چندگروهی کای و همکاران (2011) بررسی شد. نتایج بعدیت نشان داد مدل دوعاملی نسبت به مدل پاسخ مدرج شده برازندگی بهتری با داده ها دارد و وابستگی مکانی سؤال بین سؤال های دو صفت ادبی موجب انحراف از تک بعدی بودن شده است، تفاوت زبانی نیز مقدار زیادی از واریانس آنها را تبیین می کند. نتایج تأثیر نشان داد متوسط برآورد توانایی های تک زبانه ها بالاتر از دوزبانه ها است. همچنین نتایج نشان داد سؤال ها با کارکرد افتراقی یکنواخت برای تک زبانه ها دشوارتر از دوزبانه ها هستند و در سؤال های چندگزینه ای با کارکرد افتراقی غیر یکنواخت تک زبانه ها عملکرد بهتری دارند. به طور کلی، نتایج نشان داد صفات مرتبط با دو متن در بین دانش آموزان تک زبانه و دوزبانه به گونه متفاوتی ادراک می شوند و در بین دوزبانه ها وابستگی مکانی سؤال بیشتر از تک زبانه ها است. همچنین نتایج حاکی از تفاوت عملکرد دانش آموزان تک زبانه –دوزبانه در سؤال ها با شکل آمیخته است.The Analysis of Dimensionality, Testlet Effect and Differential Item Functioning and Impact in Testlet-Based Tests
The present study was conducted to investigate the impact of monolinguality-bilinguality of Iranian students on dimensionality, local item dependence and differential item functioning and impact of questions included in the passages of PIRLS (2011). The dimensionality was analyzed through comparing the one-dimensional graded response model and the multidimensional bi-factor item-response theory model. Next, the local item dependence and impact was analyzed using the two-level bi-factor model and, finally, the differential item functioning was examined using a multiple-group bi-factor model used by Cai et al. (2011).
The results of the dimensionality showed that the bi-factor model better fitted to the data than the graded response model. Furthermore, it was found that the local item dependence between two literal trait questions caused deviation from the one-dimensionality and that the linguistic difference could explain a majority of its variance. The Testlet results also showed that the average estimation of monolinguals’ abilities was higher than bilinguals’ abilities. Besides, it was indicated that items embedded with uniform differential item functioning were more difficult for monolinguals than bilinguals but monolinguals outperformed bilinguals in multiple choice items embedded with non-uniform differential item functioning.
Overall, the results showed that the traits related to the two literal Testlet were differently perceived among monolingual and bilingual students and local item dependence was more evident among bilinguals than monolinguals. Also, the results indicated a difference between the performance of monolingual and bilingual students in the mixed items format.