|
بازشناسی زبان اشاره با ترکیب اطلاعات بدست آمده از سنسور کنترل‌کننده حرکت و تصویر دست
|
خدیجه مهدیخانلو   ، حسین ابراهیم نژاد* |
| دانشگاه صنعتی سهند ، ebrahimnezhad@sut.ac.ir |
|
|
چکیده: (8629 مشاهده) |
سیستمهای بازشناسی زبان اشاره کمک میکنند تا افراد ناشنوا به رسانه های مختلف دسترسی داشته باشند. در این مقاله، سنسور کنترل کننده حرکت و تصویر دست برای بازشناسی زبان اشاره بکار گرفته شده‌اند. سنسور کنترل کننده حرکت اطلاعات مربوط به مکان سه بُعدی مفاصل دست را فراهم میکند. سری اول ویژگیها از اطلاعاتی که این سنسور فراهم میکند، استخراج میشود. مواقعی که دست عمود بر سنسور کنترل کننده حرکت قرار نگرفته یا در حالتهایی که دست مشت میشود مکان دقیق مفاصل دست قابل شناسایی نیست. سری دوم ویژگیها که از تصویر دست استخراج میشود کمک میکنند تا اکثر حالتهای دست دقیقتر بازشناسی شوند. سری دوم ویژگیها شامل هیستوگرام گرادیانهای جهتدار و فاصلهی کانتور از مرکز تصویر است. همچنین یک پایگاه دادهی متنوع از حالتهای دست زبان اشارهی آمریکایی ساخته شده است که شامل 64 هزار نمونه است. در مرحلهی بازشناسی از طبقهبند جنگل تصادفی استفاده میشود که برای پایگاه دادههای بزرگ انتخاب خوبی است. نتایج آزمایشها نشان میدهند که روش پیشنهادی نسبت به روشهای مشابه نتایج بهتری ارائه میدهد.
|
|
| واژه‌های کلیدی: : بازشناسی حالت دست، سنسور کنترل کننده حرکت، هیستوگرام گرادیانهای جهتدار، جنگل تصادفی. |
|
|
متن کامل [PDF 2348 kb]
(1645 دریافت)
|
نوع مطالعه: پژوهشي |
موضوع مقاله:
بینایی ماشین
دریافت: 1398/6/4 | پذیرش: 1398/12/11 | انتشار: 1400/1/30
|
|
|
|
|
|
|
| ارسال پیام به نویسنده مسئول |
|
|
|
| ارسال نظر درباره این مقاله |
|
|
|
