مقایسه روشهای ناپارامتری برای تعیین نمره برش در آزمونهای ملاک مرجع با استفاده از شاخص یودن مورد مطالعه: آزمون تولیمو
نویسندگان
1 دانشیار دانشگاه تهران، تهران، ایران
2 استادیار گروه برنامه ریزی درسی، دانشگاه خوارزمی، تهران، ایران
3 استادیار سازمان سنجش آموزش کشور، تهران، ایران
4 دانشجوی دکتری رشته سنجش و اندازه گیری، دانشگاه تهران، تهران، ایران.
5 دانشیار دانشکده روان شناسی و علومتربیتی؛ دانشگاه تهران، تهران، ایران
doi
10.22054/jem.2024.77090.3508چکیده
شاخص یودن یک معیار متداول برای منحنی ویژگی عملکرد (ROC) است که هم کارایی یک آزمون ملاکمرجع را میسنجد و هم مقدار نمره برش را برای آزمون مشخص میکند. این پژوهش با هدف مقایسه و ارزیابی سه روش برآورد ناپارامتری تجربی، هسته با روش پهنای باند سیلورمن و هسته با روش پهنای باند اعتبارسنجی متقابل ماکسیمم درستنمایی برای محاسبه مقدار شاخص یودن انجام شده است. در این پژوهش برای ارزیابی عملکرد از شاخصهای خطای استاندارد بوت استرپ (BSE)، ریشه میانگین مربعات خطا (RMSE)، مربع خطای یکپارچه (ISE) و میانگین مربعات خطای یکپارچه (MISE)استفاده شده است. نتایج نشان میدهد که روش هسته با اعتبارسنجی متقابل ماکسیمم درستنمایی دارای مقدار شاخص یودن بالاتری بود. نمرات برش به دست آمده برای روشهای هسته 479 و برای روش تجربی 465 به دست آمد. با توجه به نتایج قابل قبول شاخصهای ارزیابی، روشهای هسته بهویژه با پهنای باند بهینه اعتبارسنجی متقابل ماکسیمم درستنمایی منجر به برآوردهای قابل اعتمادتری از شاخص یودن و نمره برش برای آزمون تولیمو میشود.
