שמועות נפוצו על אוזניות מציאות רבודה או משקפיים חכמים מתוצרת אפל כבר לא מעט שנים, אך עד כה מפיק האייפון טרם אישר רשמית שהחומרה נמצאת בפיתוח. התוספות שבוצעו ל-ARKit ב-iOS 13, כמו גם שפע של פטנטים ודוחות אחרים מצביעים על כך שאפל קרובה יותר לחשוף את עבודתה מאי פעם.
במהלך ההרצאה המרכזית של WWDC 2019, אפל הקדישה זמן לחשוף כמה מהתכונות החדשות ביותר שהיא מביאה לARKit 3, המסגרת של החברה המאפשרת למפתחים להוסיף פונקציונליות של מציאות רבודה לאפליקציות שלהם. התוספות שיגיעו כחלק מ-iOS 13 יביאוה-AR של אפלמאמצים לרמה חדשה, קרובה יותר לצורה האידיאלית של הטכנולוגיה שמשתמשים צופים לה.
אולם לעת עתה, AR במערכת האקולוגית של אפל ממשיכה להיות מוגבלת למכשירי אייפון ואייפד, שהם פחות אידיאליים בכל הנוגע לחוויית המשתמש. גרסה של ARבאמצעות אוזניות, מתן האפקט מבלי לדרוש מאנשים להחזיק מעמד ולהסתכל דרך חלון מוגבל במכשיר נייד, יכול להיות הצורה המשוכללת של הטכנולוגיה, ואפל ממשיכה להתקרב ליצירה עם כל אחד מהשיפורים שלה לפלטפורמה.
ARKit 3 ב-iOS 13
ההרצאה המרכזית הדגישה כמה אלמנטים שעד כה היו חסרים בחוויית ה-AR, שהתאפשרה באמצעות גרסאות ARKit קודמות.תחת ARKit 3, בוצעו שינויים רבים כדי להפוך אותו למושך יותר, ולאפשר למפתחים להציע עוד יותר פונקציונליות באפליקציות שלהם.
מרכיב מרכזי של ARKit 3 הוא חסימת אנשים, כאשר מכשיר ה-iOS מזהה שיש אדם שעומד באמצע סצנה משופרת AR. במקום לכסות את תצוגת המצלמה עם האובייקטים הדיגיטליים, ARKit 3 יכול לזהות את המרחק שהאדם הנראה נמצא מהמשתמש, ואם הם קרובים יותר ממה שאובייקט דיגיטלי יהיה תיאורטית, יכול לשנות את שכבת העל כדי לגרום לאובייקט להיראות מאחורי האדם.
הטכניקה גם מאפשרת את האפשרות לאפקטים בסגנון מסך ירוק, שבהם נושא שנצפה דרך אפליקציה עשוי להיראות עובר בסביבה דיגיטלית מלאה, ללא צורך ברקע כרומה מפתח.
תצוגה של סצנת AR שחוסמת אובייקטים דיגיטליים כדי לגרום להם להופיע מאחורי הנושא
אפל גם הוסיפה יכולות לכידת תנועה, שבהן ניתן היה לנתח ולפרש את התנועות של נושא בזמן אמת באפליקציה. חלוקת הנושא לשלד פשוט, מפרקים ועצמות ניתן לקבוע ולנטר שינויים, כאשר תנועות אלו יכולות להפעיל אנימציות או להיות מוקלטות עבור תנועות מותאמות אישית של דמויות.
שינויי המעקב משפיעים גם על ARKit Face Tracking, שכבר מנצלת את מצלמת TrueDepth בדגמי iPhone ו- iPad Pro המודרניים כדי לנתח את פני המשתמש, כגון עבור Memoji ו- Snapchat. ב-ARKit 3, מעקב הפנים הורחב כדי לאפשר לו לעבוד עם עד שלוש פנים בו זמנית.
מרכיב מרכזי נוסף הוא היכולת של משתמשים לשתף פעולה זה עם זה בתוך אותה סביבת AR. על ידי מתן אפשרות לאנשים לראות את אותם הפריטים והסביבה בהפעלה אחת, זה יכול לאפשר למשחקים מרובי משתתפים ועבודה משותפת להתקיים ב-AR בין מספר אנשים, מה שמאפשר אלמנט חברתי לחוויות AR.
שינויים נוספים שהוצגו גם ב-ARKit 3 הם היכולת לעקוב אחר פני המשתמש והעולם באמצעות המצלמות הקדמיות והאחוריות בו-זמנית, זיהוי עד 100 תמונות בו-זמנית, הערכות אוטומטיות של גדלי תמונה פיזיים, אובייקט תלת-ממדי חזק יותר. זיהוי, וזיהוי מטוס משופר באמצעות למידת מכונה.
העבודה השוטפת של אפל
מלבד ההכרזות של ARKit, פטנטים הם מקור שני להוכחות לעבודת משקפי ה-AR של אפל.
אמנם לא ערובה שאפל מתכוונת להשתמש ברעיונות שהיא מגישה למשרד הפטנטים והסימנים המסחריים של ארה"ב במוצרים ושירותים עתידיים, אך ההגשות מצביעות לפחות על תחומי עניין קודמים למאמצי המחקר והפיתוח של אפל.
תמונה מתוך הגשת פטנט של אפל המציגה מצלמות בתוך ומחוץ לאוזניות
מרכיב מרכזי באוזניות ה-AR הוא התצוגה, שכן זמני תגובה מהירים חיוניים ליצירת אשליה מושלמת של נוף וירטואלי ואמיתי משולבים.בקשות לפטנטיםמדצמבר 2016 ומינואר 2017, שכותרתו "תצוגות עם מצבי סריקה מרובים" מתארת כיצד מעגלים של צג יכולים לעדכן רק חלקים חלקיים של תצוגה עבור כל רענון ולא לכל התצוגה, על מנת למזער את האפשרות של חפצים להופיע ברזולוציה גבוהה ו מסכי קצב רענון גבוה.
עדכון רק של חלק מהמסך מציע גם פחות עבודה לתצוגה לבצע כל רענון, מה שמאפשר תקופות רענון קצרות יותר וקצב עדכון מסך מהיר יותר. עדכונים מהירים יותר עשויים גם לעזור לצמצם את מחלת התנועה אצל חלק מהמשתמשים, שבהם התצוגה לא מתעדכנת מהר מספיק כדי להתאים לתנועות הפיזיות של ראשו של המשתמש.
היכולת להפוך את העולם במהירות גבוהה יכולה גם לסייע במניעת בחילות ומחלות תנועה, כפי שהוצע ב-הגשת 2017עבור "מערכת מציאות מדומה וחזויה". המורכבת מאוזניות עם מערך מצלמות מרובות, החומרה תצלם תמונות של העולם ברזולוציות נמוכות וגבוהות, כאשר החלקים הגבוהים יותר מוצגים למשתמש היכן שעיניו מסתכלות על הצג, בעוד שהחלק התחתון ממלא את הפריפריה, זירוז עיבוד הסצנה.
"מערכת תצוגה עם חיישני עולם ומשתמש" משנת 2016 משתמשת במצלמות מחוץ ובתוך הדיבורית כדי לעקוב אחר הסביבה ואחרי עיניו, הבעותיו ומחוות היד של המשתמש, מה שמאפשר ליצור צורה של תמונת מציאות מוגברת וליצור איתה אינטראקציה.
תמונת רישום פטנט המציגה שימוש ב'מראה חמה' למעקב עיניים
מעקב עיניים הופיע רבות גם בהגשת פטנטים, כולל אחת ממאי 2019 לצורך קביעהדומיננטיות עינית, ואחריםמ-2018מציע דרכים לבצע בפועל מעקב עיניים קרוב ככל האפשר לראשו של המשתמש. על ידי קירוב ציוד המעקב לפנים ושימוש בפריטים כמו "מראה חמה" כדי להחזיר אור אינפרא אדום, יש פחות משקל הממוקם רחוק יותר מראשו של המשתמש, וכתוצאה מכך חווית משתמש נוחה יותר.
ברמה המעשית יותר, אפל גם חקרה איך משקפי AR יכוליםלהתאים בצורה מושלמתשימוש במערכות כוונון שונות בשנת 2019, כולל רצועות מנועיות וחלקים מתנפחים כדי למנוע מהדיבורית לזוז ברגע שנלבשה. גם ויסות תרמית נקבע כמרכיב חשוב, המקרר לא רק את החומרה בתוך האוזניות, אלא גם את פניו של המשתמש.
אפל גם שקלה כיצד ליצור צורה של משקפיים חכמים שבמקום להשתמש בתצוגה נפרדת, פשוט מציבה את האייפון של המשתמש מול עיניו. צורה מתקדמת יותר של מארזי אוזניות VR פשוטים מבוססי סמארטפון,ההצעה של אפלעבור "מכשיר תצוגה צמוד ראש לשמירה על מכשיר אלקטרוני נייד עם תצוגה משנת 2017 מחליק אייפון מצד אחד, כולל מצלמה וכפתורים חיצוניים, אוזניות מובנות בזרועות ושלט רחוק.
תמונת רישום פטנט של משקפיים חכמים אוחזים באייפון
לצורך אינטראקציה, אפל הקדישה זמן לבחון כיצד להשתמשכפפות חישת כוחעם מערכות VR ו-AR. על ידי שימוש בחוטים מוליכים וחיישנים משובצים, כפפות ובגדים אחרים יכולים לספק יכולות חישת כוח שיכולות להפעיל פקודות, לקרוא מחוות ואפילו לספור את מספר האצבעות במגע עם עצם פיזי.
בצד הבקשה, הגשת הפטנטים של אפל מציעה שניתן להשתמש ב-AR עבורנסיעה-ברדשירותים, עם משקפיים חכמות המאפשרות ללקוחות למצוא את הנסיעה שלהם ולהיפך. עבור ניווט, פטנט אחד משנת 2019 מייעץ כיצדנקודות ענייןיכול להיות מוצג בתצוגת עולם אמיתי באמצעות AR, כזה שניתן גם להרחיב כדי לייעץ לגבי מיקום הפריטים בחדר, במקום מאפיינים גיאוגרפיים בולטים.
כיצד אפליקציית ניווט 'נקודות עניין' יכולה להופיע במשקפיים חכמות
דוחות וספקולציות
הרעיון של אפל ליצור איזשהו משקפיים חכמות או אוזניות AR הופץ כבר זמן מה, ויכול לגרום לשחרור חומרה בשנים הקרובות. אנליסט Loup Ventures ג'ין מונסטר הציע ב-2018 שאפל תוכל לשחרר את "משקפי אפל" ב-סוף 2021, אולי מוכר עד 10 מיליון יחידות בשנה הראשונה לשחרור בעלות של כ-1,300 דולר ליחידה.
מינג-צ'י קואו, פרשן ותיק נוסף של אפל, הציע לאחרונה שהאוזניות עשויות להופיעבאמצע 2020, כאשר הייצור יתחיל ככל הנראה בסוף 2019.
באשר לאופן שבו המשקפיים אמורים להופיע, Kuo מציע שהם יכולים לשמש יותר כתצוגה כאשר האייפון מבצע את עיקר העיבוד.WiGig, מערכת רשת אלחוטית של 60 ג'יגה-הרץ שיכולה לספק קישוריות ללא כבלים, הוצעה גם למכשיר, כמו גם עיניות ברזולוציה של 8K, ושם הקוד כביכול "T288."
אוזניות מיוצרות על ידי רכישת מעקב עיניים SensoMotoric Instruments
פיתוח אוזניות צץ ב-aדוח בטיחות דלףבשנת 2017, שם נדרשו תקריות הדורשות "טיפול רפואי מעבר לעזרה ראשונה" לאדם שבודק אב-טיפוס באחד ממשרדי אפל. ספציפית הפציעה קשורה לכאבי עיניים, מה שמרמז שזה היה בבדיקה של משהו שקשור לראייה, אולי אוזניות מסוג כלשהו.
על פי הדיווחים גם אפל דיברה איתהספקי טכנולוגיהעל רכישת רכיבים עבור אוזניות AR ב-CES ב-2019, כאשר עובדי אפל בסתר מבקרים בדוכנים של ספקים של חומרת מוליכי גל.
היו גם רכישות של חברות הקשורות קשר הדוק לייצור AR וייצור אוזניות. בשנת 2017 אפל רכשה חברת מעקב עינייםSensoMotoric מכשירים, בעוד באוגוסט 2018 הוא קנהאקוניה הולוגרפיה, סטארטאפ המתמקד בפיתוח עדשות מיוחדות עבור אוזניות AR.
