طراحی خزانه های سوال بهینه برای سنجش انطباقی کامپیوتری با در نظر گرفتن امنیت آزمون

سنجش انطباقی کامپیوتری به خزانه سوالی نیاز دارد که به خوبی طراحی شده و برای ساخت آزمون های مجزا، تعداد مناسبی  سوال داشته باشد. همچنین شامل سوال هایی باشد که از لحاظ محتوایی متعادل باشد و هزینه ساخت آزمون را کاهش دهد. یکی از روش های طراحی خزانه سوال، روش رکیس است، که در آن از روش مونت کارلو برای تعیین ویژگی های یک خزانه سوال بهینه استفاده می شود. در این پژوهش، از این روش برای طراحی خزانه هایی که با مدل سه پارامتری لجستیک مدرج شده اند، استفاده شده است. برای کنترل نرخ مواجهه سوال از روش سیمپسون-هتر و برای شبیه سازی سوال های آزمون از سه روش تصادفی (R)، تصادفی آمیخته و پیش بینی (MRP) و حداقل آگاهی آزمون (MTI) استفاده شده است. عملکرد خزانه های سوال شبیه سازی شده و عملیاتی با در نظر گرفتن مجموعه ای از ملاک های ارزیابی، با یکدیگر مقایسه شده اند. نتایج نشان می دهد که خزانه MRP نسبت به سایر خزانه های بهینه از امنیت و دقت اندازه گیری بالاتری برخوردار است و شامل سوال های زیادی با ضریب تشخیص بالا است. نرخ همپوشی آزمون در آن کمتر و درصد کوچکی از سوال های بیش مواجهه و کم مواجهه دارد. در مقابل اندازه خزانه MTI نسبت به سایر خزانه های بهینه کوچک تر و سوال هایی با ضریب تشخیص پایین تر دارد. به طور کلی با در نظر گرفتن عامل کنترل مواجهه، خزانه های بهینه، بهتر از خزانه عملیاتی عمل می کند.

Keywords:

سنجش انطباقی کامپیوتری , خزانه سوال بهینه , روش مونت کارلو-رکیس , کنترل نرخ مواجهه سوال , روش سیمپسون-هتر