کاربرد مدل چندگزینه ای در تحلیل سؤال و مقایسه برازش و آگاهی آن با مدل سه پارامتری (مورد: بخش زیست شناسی آزمون سراسری 1391) (مقاله علمی وزارت علوم)
درجه علمی: نشریه علمی (وزارت علوم)
آرشیو
چکیده
هدف اصلی پژوهش حاضر کاربرد مدل چندگزینه ای در تحلیل سؤال های چندگزینه ای و مقایسه برازش و آگاهی آن با نتایج مدل سه پارامتری است. برای این منظور، از بین همه شرکت کنندگان آزمون سراسری 92-1391 در گروه آزمایشی تجربی درس زیست شناسی (50 سؤال)، نمونه ای 5000 نفری به صورت تصادفی انتخاب شد. پس از بررسی پیش فرض تک بعدی بودن با استفاده از نرم افزار NOHARM، سؤال های آزمون با برنامه MULTILOG تحلیل شد. مدل سه پارامتری که از نظر ساختاری در میان مدل های دو ارزشی، نزدیک ترین مدل به مدل چند گزینه ای است، به عنوان مدل دو ارزشی مناسب، برای مقایسه آگاهی برازش آن با مدل چند گزینه ای انتخاب شد. نتایج این بررسی ها نشان دهنده کارایی این مدل در تحلیل گزینه های انحرافی سؤال های چندگزینه ای است. به علاوه مدل چندگزینه ای، توانایی آزمودنی های پایین تر از متوسط و مدل سه پارامتری، توانایی آزمودن های بالاتر از متوسط را با دقت بیشتری برآورد می کنند. در مقایسه برازش مدل سه پارامتری با مدل چند گزینه ای، شواهد از برتری مدل سه پارامتری حکایت دارد. بر اساس نتایج می توان از مدل چندگزینه ای در کنار سایر روش ها برای افزایش آگاهی به عملکرد گزینه های سؤال استفاده کرد.The Application of Multiple Choice Model (MCM) in Item Analysis and the Comparison of its Fit and Information with Three Parametric model (3PM): Case Study: The Biology Test of University’s Entrance Exam 2012
The main objective of the present study is to apply multiple-choice model (MCM) for analyzing multiple choice items and comparing its fit and information with the three parametric model (3PM). To this end, among all the participants in biology test (contained 50 four-choice items) of University’s entrance exam in the field of Natural Sciences in 2012(1391), 5000 participants were randomly selected as the sample by SPSS software. In order to analyze the test and its items based on the multiple choice model, the assumptions of unidimensionality were firstly investigated by NOHARM software. Then, the test items were analyzed by MULTILOG program. Three-parameter model, which is the closest one to multiple-choice model in terms of parametric structure, was selected as the most appropriate binary model for comparing its information and fitting with multiple-choice model. The results indicated the efficacy of multiple-choice model for analyzing distractors. In comparing the fit of 3PM with MCM, the results showed better fitness of 3PM to the whole test than multiple-choice model. In addition, results indicated the appropriateness of multiple-choice model in accuracy of estimating the ability of subjects with lower-than-average ability, while 3PM estimates the ability of higher than average subjects more accurately. Accordingly, it is recommended that MCM model can be applied for farther knowledge about items’ distractors performance along with other methods.