This post is also available in:
English (אנגלית)
מחקר שנערך לאחרונה מציע תובנות מבטיחות לגבי האופן שבו הבעות פנים יכולות לשמש לשליטה במערכות מציאות מדומה (VR) ומציאות רבודה (AR), מה שעשוי לחולל מהפכה בנגישות עבור משתמשים עם מוגבלויות. המחקר, שנערך על ידי חוקרים מאוניברסיטת גלזגו ואוניברסיטת סנט גאלן בשווייץ, מדגים כיצד משקפי Quest Pro של מטא יכולים לזהות שבע תנועות פנים פשוטות, ומציע דרך לנווט בסביבות וירטואליות ללא ידיים.
המחקר, שצפוי להיות מוצג בכנס Chi 2025 ביפן בהמשך החודש, התמקד בבדיקת האפקטיביות של הבעות פנים כשיטת קלט עבור VR ו-AR. על פי TechXplore, המשתתפים התבקשו לבצע 53 הבעות פנים שהוכרו על ידי המערכת של ה-Quest Pro. המטרה הייתה לזהות הבעות פנים אשר יכולות להיות מזוהות בקלות על ידי המערכת אך נוחות מספיק כדי שהמשתמשים יוכלו לחזור עליהן באופן קבוע.
החוקרים מצאו כי שבע Facial Action Units (FAUs), כגון מצמוץ העיניים, ניפוח הלחיים ומשיכת קצוות הפה – סיפקו את האיזון הטוב ביותר של דיוק ונוחות. הבעות אלה יכולות לשלוט באופן אמין במשימות בסיסיות במשחק מציאות מדומה ובסביבת אינטרנט של מציאות רבודה.
התוצאות מצביעות על כך ששליטה באמצעות הבעות הפנים יכולה להפוך לחלופה בעלת משמעותית לשלטים ידניים מסורתיים, במיוחד עבור אנשים עם ליקויים מוטוריים או לקויות המונעות שימוש בהתקני קלט סטנדרטיים. מחברי המחקר ציינו כי טכנולוגיות VR ו-AR נחשבו לעתים קרובות לבלתי נגישות בשל הסתמכותן על תנועות ידיים. גישה חדשה זו מציעה את הפוטנציאל להתגבר על מחסומים אלה.
כדי לאמת את שיטת בקרת הפנים, הצוות יצר מודל רשת עצבית שהשיג דיוק של 97% בזיהוי תנועות הפנים שנבחרו. בניסויים, מתנדבים השתמשו בפניהם כדי לבצע משימות כמו סיבוב, בחירת אפשרויות וניווט בדפי אינטרנט. בעוד ששלטים עדיין סיפקו שליטה מדויקת יותר למשחקים, המשתתפים מצאו את שיטת הבעות הפנים לאינטואיטיבית וקלה לשימוש יותר עבור גלישה באינטרנט, על פי TechXplore.
החוקרים מאמינים כי בקרת פנים יכולה לשנות את כללי המשחק לא רק עבור אנשים עם מוגבלות, אלא גם עבור משימות יומיומיות, כגון שליטה במכשירים כאשר הידיים תפוסות. הם מתכננים להרחיב את המחקר כך שיכלול אנשים עם מוגבלויות, ויציע דרך חדשה לנגישות בטכנולוגיות XR.
מחקר זה מדגיש את הפוטנציאל הבלתי מנוצל של הבעות פנים בממשקים ופותח את הדלת לאינטראקציות יותר כוללניות ויעילות הן בסביבות VR והן בסביבות AR.