:: دوره 7، شماره 1 - ( 6-1399 ) ::
جلد 7 شماره 1 صفحات 4-32 برگشت به فهرست نسخه ها
بازشناسی زبان اشاره‌ با ترکیب اطلاعات بدست آمده از سنسور کنترل‌کننده حرکت و تصویر دست
خدیجه مهدیخانلو، حسین ابراهیم نژاد
دانشگاه صنعتی سهند ، ebrahimnezhad@sut.ac.ir
چکیده:   (1545 مشاهده)
سیستم­های بازشناسی زبان اشاره کمک می­کنند تا افراد ناشنوا به رسانه­ های مختلف دسترسی داشته باشند. در این مقاله، سنسور کنترل کننده حرکت و تصویر دست برای بازشناسی زبان اشاره بکار گرفته شده‌اند. سنسور کنترل کننده حرکت اطلاعات مربوط به مکان سه بُعدی مفاصل دست را فراهم می­کند. سری اول ویژگی­ها از اطلاعاتی که این سنسور فراهم می­کند، استخراج می­شود. مواقعی که دست عمود بر سنسور کنترل کننده حرکت قرار نگرفته یا در حالت­هایی که دست مشت می­شود مکان دقیق مفاصل دست قابل شناسایی نیست. سری دوم ویژگی­ها که از تصویر دست استخراج می­شود کمک می­کنند تا اکثر حالت­های دست دقیق­تر بازشناسی شوند. سری دوم ویژگی­ها شامل هیستوگرام گرادیان­های جهت­دار و فاصله­ی کانتور از مرکز تصویر است. همچنین یک پایگاه داده­ی متنوع از حالت­های دست زبان اشاره­ی آمریکایی ساخته شده است که شامل 64 هزار نمونه است. در مرحله­ی بازشناسی از طبقه­بند جنگل­ تصادفی استفاده می­شود که برای پایگاه­ داده­های بزرگ انتخاب خوبی است. نتایج آزمایش­ها نشان می­دهند که روش پیشنهادی نسبت به روش­های مشابه نتایج بهتری ارائه می­دهد.
 
واژه‌های کلیدی: : بازشناسی حالت دست، سنسور کنترل کننده حرکت، هیستوگرام گرادیان‌های جهت‌دار، جنگل‌ تصادفی.
متن کامل [PDF 2348 kb]   (140 دریافت)    
نوع مطالعه: پژوهشي | موضوع مقاله: بینایی ماشین
دریافت: 1398/6/4 | پذیرش: 1398/12/11 | انتشار: 1400/1/30


XML   English Abstract   Print



دوره 7، شماره 1 - ( 6-1399 ) برگشت به فهرست نسخه ها