טכנולוגיית מגע אקוסטית עוזרת לעיוורים 'לראות' באמצעות סאונד - Physics World

חוקרים באוסטרליה מפתחים משקפיים חכמים לעיוורים, תוך שימוש בטכנולוגיה הנקראת "מגע אקוסטי" כדי להפוך תמונות לצלילים. ניסויים ראשוניים מצביעים על כך שטכנולוגיית אודיו מרחבית לבישה זו יכולה לעזור לאנשים שהם עיוורים או בעלי פגיעה משמעותית בראייה לאתר חפצים סמוכים.

שיפורים אחרונים במציאות רבודה, טכנולוגיית מצלמה לבישה מעשית וראייה ממוחשבת מבוססת למידה עמוקה מאיצים את הפיתוח של משקפיים חכמות כטכנולוגיה מסייעת בת קיימא ורב-תכליתית עבור עיוורים או בעלי ראייה לקויה. משקפיים חכמות כאלה משלבות מצלמות, מערכות GPS, מיקרופון ויחידות מדידה ואינרציה וחישת עומק כדי לספק פונקציות כגון ניווט, בקרת זיהוי קולי, או עיבוד אובייקטים, טקסט או סביבה כדיבור מסונתז על ידי מחשב.

האו יואן ג'ו ועמיתים באוניברסיטה לטכנולוגיה סידני (UTS) ו אוניברסיטת סידני חקר את התוספת של מגע אקוסטי למשקפיים חכמים, גישה המשתמשת בסריקת ראש והפעלה של אייקונים שמיעתיים כשאובייקטים מופיעים בתוך שדה ראייה מוגדר (FOV).

כותב ב PLoS ONE, מסבירים החוקרים כי מגע אקוסטי מציע מספר יתרונות על פני גישות קיימות, כולל קלות אינטגרציה עם טכנולוגיית משקפיים חכמים ושימוש אינטואיטיבי יותר מאשר דיבור מסונתז במחשב. מערכות כאלה עשויות גם לדרוש פחות הכשרה כדי שהמשתמשים יהיו מיומנים.

עבודה עם ARIA Research של סידני (שזכתה לאחרונה חברת הטכנולוגיה האוסטרלית של השנה על חידושי החזון-טכנולוגיים החלוציים שלו), הצוות יצר מכשיר אודיו מודגש (FAD) כדי לבדוק את ההנחות הללו על שבעה מתנדבים ללא ראייה או לקויה, בתוספת שבעה משתתפים בעלי עיניים רואות. ה-FAD כולל סמארטפון ומשקפי מציאות רבודה NREAL, שאליהם הצוות חיבר סמנים מחזירי אור לכידת תנועה כדי לאפשר מעקב אחר תנועות הראש.

ה-FAD מבצע זיהוי אובייקט וקובע את מרחק האובייקט באמצעות מצלמות הסטריאו על המשקפיים. לאחר מכן, הוא מקצה סמלים שמיעתיים מתאימים לאובייקטים, כגון צליל של הפיכת עמוד עבור ספר, למשל. כאשר הלובש מסובב את ראשו, קצב החזרות של הסמלים השמיעתיים משתנה בהתאם למיקומו של הפריט בתוך ה-FOV השמיעתי.

המתנדבים השתתפו בתרגילים בישיבה ובעמידה. המשימה בישיבה דרשה מהם להשתמש בשיטות שונות כדי לחפש ולטפל בפריטים יומיומיים, כולל ספר, בקבוק, קערה או כוס, המוצבים על שולחן אחד או מספר שולחן. משימה זו מדדה את יכולתם לזהות פריט, לזהות צליל ולשנן את מיקומו של הפריט.

החוקרים תכננו את המשימה הזו כדי להשוות את ביצועי ה-FAD עם שני סממני דיבור קונבנציונליים: כיוונים מילוליים של פני שעון; והשמעה ברצף של אייקונים שמיעתיים מרמקולים הממוקמים יחד עם כל פריט. הם מצאו שעבור משתתפים עיוורים או לקויי ראייה, הביצועים באמצעות ה-FAD היו דומים לשני התנאים האידיאליים. עם זאת, קבוצת הראייה עם כיסוי עיניים הובילה לביצועים גרועים יותר בעת השימוש ב-FAD.

השתלת מוח מאפשרת לאישה עיוורת לראות צורות פשוטות

משימת ההגעה בעמידה חייבה את המשתתפים להשתמש ב-FAD כדי לחפש ולהגיע לפריט יעד שנמצא בין מספר פריטי מסיחים. המשתתפים התבקשו למצוא חפצים שהונחו על שלושה שולחנות המוקפים בארבעה בקבוקים בצורות שונות. משימה זו העריכה בעיקר את הביצועים התפקודיים של המערכת, ואת ההתנהגות האנושית בעת שימוש בתנועת הגוף המלא במהלך החיפוש.

"השנה, בדקנו רבות את השימוש בנוף הקול השמיעתי כדי לתמוך במשימות מורכבות שונות", אומר ז'ו עולם הפיזיקה. "בפרט, חקרנו שימוש בסוגים שונים של צלילים מרחביים כדי להנחות אנשים במהלך ניווט ופעילויות ספורטיביות תומכות, במיוחד טניס שולחן. בשנה הבאה, אנו מקווים להמשיך להרחיב את התחומים הללו ולערוך מחקרים במסגרות של העולם האמיתי".

• הפצת תוכן ויחסי ציבור מופעל על ידי SEO. קבל הגברה היום.
• PlatoData.Network Vertical Generative Ai. העצים את עצמך. גישה כאן.
• PlatoAiStream. Web3 Intelligence. הידע מוגבר. גישה כאן.
• PlatoESG. פחמן, קלינטק, אנרגיה, סביבה, שמש, ניהול פסולת. גישה כאן.
• PlatoHealth. מודיעין ביוטכנולוגיה וניסויים קליניים. גישה כאן.
• מקור: https://physicsworld.com/a/acoustic-touch-technology-helps-blind-people-see-using-sound/