ارائه یک مدل احتمالاتی جهت تعیین انسجام متن در سیستم‌های پرسش و پاسخ تعاملی

نویسندگان

1 دانشکده کامپیوتر؛ دانشگاه صنعتی شاهرود؛ شاهرود؛ ایران

2 دانشکده کامپیوتر؛ دانشگاه صنعتی شاهرود؛ شاهرود؛ ایران

doi
10.35050/JIPM010.2018.032
چکیده

همانند بسیاری از زمینه‌های زبان‌شناسی محاسباتی، ارزیابی نقش مهمی در سیستم‌های پرسش و پاسخ تعاملی ایفا می‌کند. یکی از معیارهایی که در زمینه ارزیابی این سیستم‌ها دارای اهمیت است، میزان انسجام بین سؤال‌ها و پاسخ‌های ردوبدل ‌شده بین کاربر و سیستم است. در این مقاله، یک راه‌ حل اتوماتیک برای تعیین میزان انسجام متن تولیدشده ارائه شده است. مدل پیشنهادی، یک مدل احتمالاتی است که در آن برای استخراج ویژگی از میزان شباهت بین N-گرم‌های مختلف بر اساس چهار معیار تعریف‌شده بهره گرفته شده است. سپس، با استفاده از تخمین بهترین تابع چگالی از بین 18 تابع در نظر گرفته‌شده برای هر ویژگی، یک مدل برای تعیین میزان انسجام انتخاب گردیده است. نتایج پیاده‌سازی بر روی دو پایگاه داده تهیه‌شده از چند سیستم پرسش و پاسخ تعاملی، حاکی از انطباق بسیار بالای مدل احتمالاتی پیشنهادی و دقت مناسب آن در تعیین میزان انسجام در متن مکالمه صورت‌گرفته است. برای تطبیق یا عدم تطبیق تابع چگالی احتمال به‌دست‌آمده از آزمون‌های سه‌گانه «کولموگروف-اسمیرنف»، «اندرسون دارلینگ» و «کرامر وان‌میس» استفاده شد. با توجه به نتایج ارائه‌شده، تابع چگالی احتمال «ناکاگامی» با داشتن کمترین اشتباه، بهترین عملکرد را در تعیین میزان انسجام هر مکالمه از خود نشان داد.