אפל עובדת על מעקב אחר מבטים כדי להפוך AR ו-VR למהירים ומדויקים יותר

אוזניות המציאות הרבודה או המציאות המדומה של אפל, שנשמעו ארוכות, עשויות להציע מעקב עיניים כחלק ממערכת הבקרה שלה, כאשר יצרנית האייפון תמציא דרך להפוך מערכת מעקב מבט כזו מדויקת ככל האפשר, גם כשהאוזניות בתנועה .

העכבר והמקלדת היו מערכת בקרת סיכות עבור מחשבי Mac ומחשבים אחרים מזה זמן מה, כאשר מגע הוא השדרה העיקרית לשליטה באייפון או אייפד. בעוד שקול הפך לשיטת אינטראקציה גדולה יותר בשנים האחרונות, במיוחד במכשירים ניידים, הוא לא מספיק מדויק או גמיש כדי לעבוד עבור כל המשימות, כגון לבצע פעולות שבהן משתמש בוחר נקודה ספציפית בתצוגה.

עבור תצוגות מותקנות על הראש, מערכות הבקרה למציאות מדומה מורכבות ברובן מבקרים ידניים עם מעקב תנועה שממופים ביחס למיקום האוזניות, ובדרך כלל מזוהים בתוך האפליקציה באמצעות סמן או ייצוג דמוי יד.

מעקב עיניים יכול לספק דרך חלופית למשתמשים לקיים אינטראקציה עם סביבת מציאות מדומה, על ידי זיהוי במה המשתמש מתמקד באופן ספציפי בצגי האוזניות. זה יכול לספק אינטראקציה טבעית ומדויקת יותר עם תפריט או מערכת תוכנה אחרת מאשר שימוש בידיים, שכן יש פחות סרבול מאשר לתפוס ולבחור אובייקט וירטואלי במרחב של העולם האמיתי.

עם זאת, מעקב עיניים מוגבל ברמת הדיוק שלו מכיוון שהאוזניות של המשתמש נמצאות כל הזמן בתנועה. בעוד שהדיבורית מחוברת לראש המשתמש, עדיין תנוע, כאשר המרחק בין עיני המשתמש למערכת מעקב העין משתנה כל הזמן, וממזער את מידת היעילות שלה.

ב אפָּטֶנטשהוענק לאפל על ידי משרד הפטנטים והסימנים המסחריים של ארה"ב ביום שלישי, "מכשיר אלקטרוני עם מערכת מעקב מבט" נועד לפתור את בעיית הסחף באמצעות הסתברות וזיהוי סצנה. במקום להמציא פתרון חומרה חדש לגמרי, הפטנט מציע למעשה שימוש במערכת תוכנה עם מערכת מעקב עיניים מבוססת כדי לשפר את היכולת לבחור פריטים.

הפטנט מתאר כיצד "מעגלי בקרה" במכשיר יכולים לייצר "מפת בולטות", מפת צפיפות הסתברות לתוכן המוצג על הצג, ולזהות נקודות עניין שהמשתמש יכול לקיים איתן אינטראקציה בשדה הראייה שלו. לדוגמה, זה יכול לכלול כפתורים הניתנים לבחירה, טקסט או אלמנטים אינטראקטיביים בתוך סצנה.

דוגמה פשוטה לאופן שבו משתמשים יכולים להסתכל על נקודות ספציפיות של תצוגה עבור מפת בולטות עם נקודות עניין ותפריטים.

בשימוש רגיל, אם משתמש רוצה לבחור משהו, זיהוי המבט יכול לקבוע היכן המשתמש מסתכל, ובאמצעות מפת הבולטות, לנחש במה הוא מסתכל באופן ספציפי, עם בקר נפרד המשמש לאשר את הבחירה.

בעוד מסייעת בבחירת פריט, מפת הבולטות יכולה לסייע גם בהפיכת מערכת מעקב העיניים למדויקת יותר. על ידי השוואת המקום שבו המשתמש נמדד להסתכל, אזורי העניין במפת הבולטות ביחס לנקודת המבט של המשתמש ונקודת המבט שזוהתה, ונתונים ממקורות קוליים וממקורות אחרים, זה יכול לקבוע את הסחף של האוזניות מעמדת ההתחלה שלה.

זיהוי סחיפה זה מאפשר כיול בזמן אמת של מערכת מעקב העין בכללותה, מה שהופך את זיהוי התוכן העתידי למדויק יותר לעתיד המיידי.

תרשים זרימה המתאר כיול חוזר של מערכת מעקב עיניים במהלך השימוש

אפל מגישה בקשות פטנט רבות ל-USPTO על בסיס שבועי, אך למרות שאין ערובה שהקונספט יעשה את דרכו למוצר או שירות עתידיים, הוא מצביע על תחומי עניין למאמצי המחקר והפיתוח של אפל.

מאמינים רבים שאפל עובדת עלמכשירי AR ו-VR, ועשה זאת במשך מספר שנים, עםמשקפיים חכמים מבוססי ARחשב להיות באופק לשחרור מתישהו ב-2020.

החברה צברה לא מעט פטנטים עבורטכנולוגיות קשורות, ואף עשתה ניסיונות לקדם את השימוש במוצרים שלה עבור AR ו-VR, כולל הדגמהVR ב-macOSומציגהARKit עבור iOS. גם אפל רכשהSensoMotoric מכשיריםבשנת 2017, חברה גרמנית המתמחה בטכנולוגיית מעקב עיניים.

בשנת 2018, אפל הגישה בקשה לפטנט על מערכת מעקב עיניים באמצעות א"מראה לוהטת"לשקף אור אינפרא אדום לעיני המשתמש, כזה שניתן בסופו של דבר להתקין קרוב מאוד לפנים של המשתמש כדי להפוך את האוזניות לנוחה ככל האפשר. א2015 מבוסס מבטפטנט למעקב אחר עיניים הוענק עבור שליטה במכשיר iOS או macOS על ידי הסתכלות על המסך, תוך הפחתת הנושא של אפקט הטרוקסלר שיכול להשפיע על אינטראקציות מבוססות ראייה.

בקשת פטנט אחת ממאי 2019 פירטה כיצד לקבוע איזו מעיניו של המשתמשהוא דומיננטי, נקודת נתונים שיכולה לעזור עוד יותר למערכות מעקב עיניים על ידי שקלול נתוני מיקום יותר מתוצאות העין הדומיננטית מאשר העין החלשה יותר.