| کد | ts-22587 |
|---|---|
| عنوان اول | تبدیل هم زمان و چند شیءای اطلاعات تصویر به سیگنال های صوتی برای افراد نابینا |
| نویسنده | آرمان رادان |
| استاد راهنما | مهدی باطنی |
| نوع | کاغذی |
| دانشگاه | دانشگاه شیخ بهایی، دانشکده فنی و مهندسی |
| مقطع | کارشناسی ارشد |
| رشته | مهندسی کامپیوتر - هوش مصنوعی |
| سال دفاع | 1396شمسی |
| چکیده | یکی از روش‌های متداول توان بخشی به افراد دارای معلولیت‌های حسی، جایگزینی حواس است. به این معنا که حسی سالم، بخشی از وظایف حس معیوب را به عهده می‌گیرد. برای مثال در مورد افراد ناشنوا حس بینایی از طریق زبان اشاره بخشی از کمبودهای ناشی از نقص شنوایی را جبران می‌کند یا خط بریل یک جایگزینی لامسه‌ای برای متن خوانی افراد نابیناست. سیستم پیشنهادی یک روش برای جایگزینی حس بینایی با حس شنوایی برای کمک به حرکت افراد نابیناست. بدین معنا که مکان موانع را از طریق صوت به کاربر انتقال می‌دهد تا اجتناب از آنها به خوبی صورت گیرد. این انتقال اطلاعات به کاربر، به صورت بلادرنگ و مستمر بوده و در کسری از ثانیه انجام می‌شود. به این صورت که صداهای بسیار کوتاه انتخاب شده و به صورت یک حلقه‌ی نامحدود تکرار می‌شوند. در این روش تکنیکی به کار گرفته شده که مغز کاربر فریب خورده و حس می‌کند صداها از محل موانع پیش روی او در حال پخش هستند درحالی که در واقع این صداها از هدفون داخل گوش کاربر پخش می‌شوند. برای این کار از روش دید دوتایی و تابع HRTF استفاده شده است. در مرحله‌ی اول دو تصویر از دو دوربین مجاور گرفته شده و با ترکیب این دو با استفاده از تکنیک دید دوتایی فاصله‌ی تمام اشیای موجود در تصویر با دوربین‌ها (و کاربر) تشخیص داده می‌شود. سپس اشیایی که به عنوان مانع شناسایی می‌شوند انتخاب شده و پس از خوشه بندی، به هرخوشه یک صدا اختصاص داده می‌شود و این صداها پس از عبور از تابع HRTF به کاربر منتقل می‌شوند. به این ترتیب کاربر احساس می‌کند از محل هریک از موانع پیش روی او صدایی در حال پخش شدن است و با اجتناب از نزدیک شدن به مکان این صداها، در واقع از موانع دوری می‌کند. با استفاده از تکنیک‌های مختلف بینایی ماشین روشی طراحی شده که وقتی صدایی به یک مانع (یا خوشه) اختصاص داده شد، تا زمانی که آن مانع در تصویر دوربین‌ها وجود دارد، صدای مخصوص خود را تکرار می‌کند و به این ترتیب کاربر قادر است محل چند مانع در پیش روی خود را به صورت هم زمان و مستمر تشخیص دهد. برتری این پژوهش نسبت به کارهای مشابه قبلی، تمرکز بر چند شیء ای بودن آن است به طوری که کاربر قادر است چند مانع را به طور هم زمان زیر نظر داشته باشد و این کار با کمترین سربار پردازشی و کمترین هزینه‌ی تجهیزات انجام می‌شود. در حالتی که فقط یک مانع وجود داشته باشد، عملکرد این سیستم تفاوتی با نمونه‌های قبلی نداشته و از صحت حدود 95 درصد برخوردار است. در حالت چند شیءای، با وجود افت 5 درصدی صحت در یافتن موانع، با کمی آموزش کاربر، این افت جبران می‌شود و به طور میانگین 10 تا 15 درصد بالاتر از سایر پژوهش‌ها قرار می‌گیرد. |
| تاریخ ثبت در بانک | 30 آبان 1397 |