کاربرد مدل های چند ارزشیIRT در نمره گذاری آزمون های سرنوشت ساز (مورد مطالعه: آزمون پروانه وکالت)
نویسندگان
1 دکتری سنجش و اندازهگیری ، دانشکده روان شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
2 استاد، گروه سنجش و اندازهگیری، دانشکده روان شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
3 استاد، گروه سنجش و اندازهگیری، دانشکده روان شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
4 دانشیار، گروه سنجش و اندازهگیری، دانشکده روان شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
5 دانشیار، گروه سنجش و اندازهگیری، دانشکده روان شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
doi
10.22034/emes.2023.563268.2426چکیده
هدف: هدف مطالعه حاضر، مقایسه میزان دقت و خطای اندازهگیری مدلهای دوارزشی و چند ارزشیIRT در نمرهگذاری آزمونهای توانایی سرنوشتساز بود.روش پژوهش: جامعه پژوهش شامل تمامی شرکتکنندگان آزمون سراسری پروانه وکالت سالهای 1396 و 1398 بوده که از میان آنها تعداد 5000 نفر از سال 1396 و تعداد 5000 نفر از سال 1398 با روش نمونهگیری تصادفی ساده انتخاب شدند. همچنین، گردآوری دادهها با استفاده از پاسخهای شرکتکنندگان آزمون انجام یافت. متغیر مستقل این پژوهش، شیوه و مدل نمرهگذاری و متغیر وابسته، میزان برازش و آگاهی (دقت) مدل محسوب میشود. بر این اساس، روش پژوهش آزمایشی است.یافتهها: تجزیه و تحلیل یافتهها نشان داد که از میان مدلهای لجستیک دوارزشی IRT، مدل 3 پارامتری، و از میان مدلهای چندارزشی اسمی مورد مطالعه نیز، مدل 3 پارامتری در مقایسه با سایر مدلها، برازش و نیز آگاهیدهندگی بیشتر و مطلوبتری بر روی دادههای مورد مطالعه داشتند.نتیجهگیری: با توجه به برازش و میزان آگاهی مطلوبتر مدل 3 پارامتری دو ارزشی و مدل 3 پارامتری چندارزشی در مقایسه با سایر مدلها، استفاده از این مدلها در نمرهگذاری میتواند به افزایش دقت اندازهگیری و کاهش خطا، و نیز به منصفانه بودن فرآیند گزینش متقاضیان آزمون پروانه وکالت کمک نماید.