'Apple Glass' יכול להפוך כל משטח לתצוגה עם פקדי מגע

מסכי מגע הופכים לא מעשיים כאשר המסך הזה נמצא ליד העין שלך במשהו כמו 'זכוכית תפוח," אז אפל חוקרת כיצד תוכל לתמרן פקדים וירטואליים בעולם האמיתי.

בקשת פטנט שנחשפה לאחרונה הראתה שאפל מציעה דרך להשתמשאפל ARכדי להציג מידע על מה שיופיע לכל אחד מלבד הבעלים, כמסך ריק. כעת באפליקציה נפרדת, הוא בוחן לגרום לכל משטח להיראות ללובשי "Apple Glass" כלוח בקרה, עם כפתורים ותצוגה.

"שיטה ומכשיר לזיהוי מגע בין חפץ ראשון לחפץ שני"הוגש בשנת 2016אבל רק השבוע נחשף, מציין שדרך זו של הצגת פקדים המוצבים על גבי אובייקטים בעולם האמיתי תהיה הכרחית.

"דרך טבעית לבני אדם ליצור אינטראקציה עם חפצים (אמיתיים) היא לגעת בהם בידיים שלהם", נכתב. "[מסכים] המאפשרים זיהוי ולוקליזציה של נגיעות על פני השטח שלהם ידועים בדרך כלל כמסכי מגע והם כיום חלק נפוץ של, למשל, סמארטפונים ומחשבי טאבלט."

"[עם זאת,] מגמה נוכחית היא שתצוגות עבור AR הופכות קטנות יותר ו/או שהן מתקרבות לרשתית העין של המשתמש", הוא ממשיך. "זה למשל המקרה של צגים עם ראש, והופך את השימוש במסכי מגע לקשה או אפילו בלתי אפשרי".

ה-"Apple Glass" שלך עשוי להראות לך מידע, אם כך, אבל אתה לא יכול לעשות איתו הרבה אלא אם כן אתה מוריד את המשקפיים ותוחט את העדשה עם האצבע שלך. עם זאת, מכיוון ש-AR כבר ממפה אובייקטים וירטואליים על העולם האמיתי שסביבך, ניתן להרחיב אותו כדי לגרום לו להיראות כאילו היו כפתורים ופקדים הממוקמים בנוחות היכן שניתן לגעת בהם או להקיש עליהם.

במקרה כזה, העיניים שלך יראו את האובייקט הווירטואלי כי "Apple Glass" מראה לך אותו, אבל האצבעות שלך יכולות לגעת בכל מה שבאמת נמצא במקום הזה בעולם האמיתי. אם ה-AR יכול לקבוע שנגעת במה שאתה חושב שהוא כפתור, הוא יכול להגיב כאילו באמת הקשת על פקד.

למרבה הצער, זה יותר קשה ממה שזה נשמע. הדרך שבה רעיון מסך הפרטיות של אפל יכול לעבוד היא בגלל שהאובייקט בעולם האמיתי הוא משהו כמו אייפד. גם אם האייפד הזה לא באמת מראה לך משהו בכלל על המסך שלו, הוא יכול לזהות היכן אתה מקיש.

ההצעה החדשה של אפל כוללת זיהוי הקשה או נגיעות כאלה על כל משטח בכלל. וכדי לעשות זאת מבלי לגרום למשתמש ללבוש חיישני קצות אצבעות, או להשתמש בחסימה.

"הגישה הנפוצה ביותר היא לצייד פיזית את האובייקט או את גוף האדם (למשל קצה האצבע) בחיישן המסוגל לחוש מגע", נכתב באפליקציה. אבל הוא לא מתרשם מזה או מגרסאות חשמליות שהופכות את הגוף לחלק ממעגל: "המגבלה של סוגים כאלה של גישות היא שהם דורשים שינויים באובייקט או בגוף האדם."

פרט מהפטנט המראה כיצד ניתן להפוך אובייקט שטוח ומרובע למחשבון

עם חסימה, מצלמה יכולה לצפות היכן אצבעותיו של המשתמש נוקשות. במיוחד ב-AR, זה בהחלט יכול לעבוד מכיוון שהמערכת תמפה את כל הסביבה ותדע כי, למשל, יש משטח שולחן מתחת לאצבעותיו של המשתמש.

הוא יכול, אם כן, למפות כפתורים על פני השטח הזה. עם זאת, בקשת הפטנט מציינת, למעשה, שהם יצטרכו להיות כפתורים די גדולים. הבעיה הקטלנית, לפי דניאל קורץ, הממציא הנחשב של בקשת הפטנט של אפל, היא שחסימה לא יכולה להיות מדויקת.

"עם כפתורים וירטואליים אי אפשר להפעיל כפתור, למשל מס' 5 מתוך מערך של לחצנים סמוכים בלוח המספרים, מבלי להפעיל שום כפתור אחר לפני כן", נטען, "מכיוון שלא ניתן להגיע לכפתור מס' 5 בלי חסימת כל אחד מהלחצנים שמסביב."

אתה יכול לעקוף את זה על ידי כפתורים גדולים עוד יותר, או אולי פחות מהם, אבל גם אז, מה שמערכות כאלה באמת מזהות הוא החסימה. הם מזהים אם אצבע עברה לפני "כפתור", ולא אם הכפתור הזה נלחץ באמת.

הפתרון המוצע של אפל הוא חום. "אם שני חפצים בטמפרטורות שונות נוגעים", נכתב באפליקציה, "האזור בו הם נוגעים ישנה את הטמפרטורה שלהם ואז יתכנס לאט בחזרה לטמפרטורה ההתחלתית כמו לפני המגע".

"לכן, עבור פיקסלים התואמים לנקודה בסביבה שבה התרחש מגע לאחרונה", הוא ממשיך, "חושפת ירידה איטית אך ניתנת למדידה בבירור בטמפרטורה".

אז בכל מה שהאצבע שלך נוגעת, תהיה העברת חום. זה זעיר, אבל זה בהחלט קיים. "שינויים חלקים בטמפרטורה יכולים להעיד על מגע בין שני עצמים שקרה לאחרונה במיקום הדגום", אומר הפטנט.

היישום דן בשיטות שונות לזיהוי שינויי חום, כגון באמצעות הדמיה תרמית, אך הוא עוסק בעיקר בדיוק שניתן להשיג.

"זה יכול להבחין בין נגיעות או חסימות שנגרמו על ידי גוף אנושי (שקרו בכוונה) לבין נגיעות או חסימות על ידי כל דבר אחר (שעשוי לקרות בטעות)", נכתב. "הוא מסוגל לבצע לוקליזציה מדויקת של מגע ויכול לזהות אירועי מגע לאחר שהתרחשו (כלומר גם אם לא היו נוכחים מצלמה, מחשב או כל דבר אחר בזמן המגע)."

זה האחרון תלוי בזיהוי שמתבצע די מהר לאחר המגע, אבל למשל, יכול להיות שמשתמש מקיש על משטח וההדמיה התרמית מתרחשת כשהוא לוקח את האצבע שלו. האפליקציה כוללת תמונה לדוגמה המראה הקשה אחרונה בקצות האצבע על משטח.

יחד עם הרעיון הקשור להצגת נתונים רק ללובש "Apple Glass", כל זה חלק מהעבודה הרחבה של אפל בנושא AR. זה מראה שהחברה מסתכלת לעומק - ובמשך זמן רב, שכן בקשת הפטנט הזו הוגשה לפני ארבע שנים - לתוך היישומים המעשיים של מציאות רבודה ולא רק בצד החזותי.

בין הפטנטים הרבים הקשורים של אפל בתחום ה-AR, יש עוד אחד מאת אותו דניאל קורץ שעוסק בטיפול מדויק שלאובייקטים אמיתיים ווירטואלייםיַחַד.