بکارگیری مدل مبتنی بر ترنسفورمر برای تشخیص فعالیتهای غیرطبیعی در ویدئو
نویسندگان
1 دانشجوی کارشناسی ارشد، دانشکده برق و کامپیوتر، دانشگاه سمنان، سمنان، ایران
2 استادیار، دانشکده برق و کامپیوتر، دانشگاه سمنان، سمنان، ایران
3 دانشیار، دانشکده برق و کامپیوتر، دانشگاه سمنان، سمنان، ایران
doi
10.22075/jme.2024.32914.2604چکیده
با توجه به افزایش روز افزون حجم ویدئوهای تولید شده توسط دوربینهای امنیتی و نظارتی در مکانهای شخصی و عمومی، نظارت بر فعالیتهای موجود در ویدئو امری حیاتی میباشد. بسیاری از نظارتهای ویدئویی برای بررسی صحت عملکرد و هشدار هنگام وقوع یا انجام اعمال غیرطبیعی میباشد. در این راستا، مدلهای هوشمند مختلفی جهت تشخیص فعالیتهای موجود در ویدئو ارائه گردیده است. با توجه به پیشرفتهای اخیر در حوزه هوش مصنوعی و بهخصوص یادگیری عمیق، در این مقاله، مدلی مبتنی بر شبکه ترنسفورمر ارائه میگردد. در این راستا، به منظور کاهش میزان محاسبات، نقاط کلیدی بدن مورد استفاده قرار میگیرند. تعداد 15 نقطه کلیدی بدن به مدل ترنسفورمر وارد میگردند تا با تکیه بر پردازش موازی این شبکه در حالت آموزش و نیز مکانیسم خودتوجهی، سرعت و دقت مدل افزایش داده شود. نتایج تجربی بر روی پایگاه داده عمومی JHMDB حاکی از بهبود دقت تشخیص فعالیتهای غیرطبیعی نسبت به مدلهای پایه میباشد.