خزانه سؤال بهینه

مقدمه: مطالعه ی حاضر با هدف بررسی آزمون ساختار عاملی و سنجش همسانی درونی پرسشنامه ی بهزیستی تحصیلی (AWBQ) انجام شد. روش: پرسشنامه ی بهزیستی تحصیلی و پرسشنامه ی تنیدگی تحصیلی بر روی 365 دانش آموز دوره ی متوسطه ی دوم مدارس دولتی شهر پل-دختر (189 پسر و 176 دختر) که با روش نمونه گیری تصادفی خوشه ای چند مرحله ای انتخاب شده بودند، اجر شد. به منظور تعیین روایی عاملی AWBQ از روش های آماری تحلیل عامل اکنشافی و تاییدی و به منظور بررسی همسانی درونی AWBQ از ضریب آلفای کرونباخ استفاده شد. همچنین به منظور مطالعه ی روایی واگرای AWBQ، ضریب همبستگی بین نمره ی کل بهزیستی تحصیلی و تنیدگی تحصیلی ادراک شده-ی دانش آموزان گزارش شد. یافته ها: نتایج تحلیل عاملی نشان داد که AWBQ از چهار عامل ارزش مدرسه، فرسودگی نسبت به مدرسه، رضایتمندی تحصیلی و درآمیزی با کار مدرسه تشکیل شده است. شاخص های برازش تحلیل عامل تاییدی بر پایه ی نرم افزار AMOS، وجود عوامل چهارگانه را تایید کرد. همبستگی معنادار بین نمره ی ابعاد بهزیستی تحصیلی با نمره ی کلی تنیدگی تحصیلی، روایی AWBQ را تایید کرد. همچنین همسانی درونی مقیاس ها معنادار برآورد گردید. نتیجه گیری: با توجّه به برازش مدل و اعتبار بالای پرسشنامه، از آن می توان جهت مطالعه و سنجش بهزیستی تحصیلی دانش آموزان ایرانی استفاده کرد.

سنجش انطباقی کامپیوتری (CAT) شیوه ای از سنجش توانایی است که دقت برآورد توانایی را افزایش می دهد و بدون از دست دادن دقت اندازه گیری آزمون، طول آن را کاهش می دهد. با این وجود، سنجش انطباقی در صورتی خوب عمل می کند که، دارای خزانه سؤالی باشد که در آن تعداد کافی سؤال با کیفیت مناسب وجود داشته باشد. بسیاری از محققان خاطر نشان کردند که، برای ساخت خزانه سؤالی برای (CAT)، نه تنها اندازه خزانه سؤال مهم است، بلکه توزیع پارامترهای سؤال های خزانه نیز از اهمیت به سزایی برخوردار است. با این وجود، تحقیقات اندکی در مورد این که چگونه این ویژگی های مطلوب تعیین می شود، وجود دارد. هدف اصلی این پژوهش، تلفیق ایده“bin-and-union” برگرفته از رویکرد ریکیسی (2003)، که یک روش شبیه سازی مونت کارلو برای تعیین ویژگی های خزانه سؤال است، با رویکرد برنامه نویسی ریاضی بوده است. در این پژوهش این روش برای ساخت یک خزانه سؤال بهینه برای آزمون سنجش انطباقی ریاضی به کار رفته است. خزانه سؤال پژوهش حاضر بر اساس مدل سه پارامتری مدرج شده است، و روش سیمپسون-هتر برای کنترل مواجهه سؤال به کار رفته است. این طرح شامل برآوردهایی از اندازه مطلوب خزانه سؤال و توزیع مطلوب پارامترهای سؤال ها و ویژگی های غیر آماری آن بوده است. فرآیند طراحی این خزانه شامل تعیین مجموعه ای از ویژگی های مطلوب خزانه سؤال، با درنظر گرفتن چندین عامل مهمی که ممکن بود بر نتایج مورد نظر طراحی یک خزانه سؤال اثر گذارد، بوده است. عملکرد خزانه های سؤال شبیه سازی شده و عملیاتی با در نظر گرفتن مجموعه ای از ملاک های ارزیابی، با یکدیگر مورد مقایسه قرار گرفته اند. نتایج ارزیابی نشان داد که، مکانیزم به کار رفته برای تعیین ویژگی های مطلوب خزانه سؤال به خوبی عمل می کند و برای تعیین ویژگی های مطلوب خزانه سؤال مناسب است.

سنجش انطباقی کامپیوتری به خزانه سؤالی نیاز دارد که به خوبی طراحی شده و برای ساخت آزمون های مجزا، تعداد مناسبی  سؤال داشته باشد. همچنین شامل سؤال هایی باشد که از لحاظ محتوایی متعادل باشد و هزینه ساخت آزمون را کاهش دهد. یکی از روش های طراحی خزانه سؤال، روش رِکیس است، که در آن از روش مونت کارلو برای تعیین ویژگی های یک خزانه سؤال بهینه استفاده می شود. در این پژوهش، از این روش برای طراحی خزانه هایی که با مدل سه پارامتری لُجستیک مدرج شده اند، استفاده شده است. برای کنترل نرخ مواجهه سؤال از روش سیمپسون-هتر و برای شبیه سازی سؤال های آزمون از سه روش تصادفی (R)، تصادفی آمیخته و پیش بینی (MRP) و حداقل آگاهی آزمون (MTI) استفاده شده است. عملکرد خزانه های سؤال شبیه سازی شده و عملیاتی با در نظر گرفتن مجموعه ای از ملاک های ارزیابی، با یکدیگر مقایسه شده اند. نتایج نشان می دهد که خزانه MRP نسبت به سایر خزانه های بهینه از امنیت و دقت اندازه گیری بالاتری برخوردار است و شامل سؤال های زیادی با ضریب تشخیص بالا است. نرخ همپوشی آزمون در آن کمتر و درصد کوچکی از سؤال های بیش مواجهه و کم مواجهه دارد. در مقابل اندازه خزانه MTI نسبت به سایر خزانه های بهینه کوچک تر و سؤال هایی با ضریب تشخیص پایین تر دارد. به طور کلی با در نظر گرفتن عامل کنترل مواجهه، خزانه های بهینه، بهتر از خزانه عملیاتی عمل می کند.