אפל זכתה ביום שלישי בפטנט על מערכת מציאות רבודה (AR) שיכולה לזהות אובייקטים בזרם וידאו חי ולהציג מידע התואם לאובייקטים הללו דרך שכבת מידע שנוצרה על ידי מחשב הממוקמת על גבי תמונת העולם האמיתי.
פורסם על ידי משרד הפטנטים והסימנים המסחריים בארה"ב, הפטנט האמריקאי של אפלמס' 8,400,548עבור "תצוגות מציאות רבודה מסונכרנות ואינטראקטיביות למכשירים רב-תכליתיים" מתארת מערכת AR מתקדמת המשתמשת בתכונות שונות של מכשירי iOS כמו מסך ריבוי מגע, מצלמה וקישוריות לאינטרנט, בין היתר, כדי להקל על פונקציונליות AR מתקדמת.
כמו במערכות AR אחרות, הפטנט של 548' משתמש בתמונות מהעולם האמיתי ומציג אותן מתחת לשכבת מידע שנוצרה על ידי מחשב. בדוגמה של ההמצאה, משתמש מחזיק את המכשיר הנייד שלו מעל לוח מעגלים. הווידאו החי מציג רכיבים שונים כמו המעבד, כרטיסי הזיכרון והקבלים. כמו כן, כלול בתצוגה זו ברקוד וסמנים.
בהתגלמות אחת, הווידאו החי מכוסה בשכבת מידע משולבת, שיכולה להיראות כמו קווים מקווקוים או צבעוניים, הערות ורמזים ויזואליים אחרים שמעובדים ומופקים על ידי ה-CPU המובנה במכשיר. הערות יכולות להיות בצורת טקסט, תמונות או קישורי אינטרנט, ולספק מידע בזמן אמת הקשור לאובייקטים המתאימים. כדי לזהות את האובייקטים, ההמצאה של אפל נעזרת בטכניקות זיהוי קיימות, כולל זיהוי קצוות, שינוי מאפיינים ללא שינוי קנה מידה (SIFT), התאמת תבניות, מודלים של אובייקטים תלת מימדיים מפורשים ומרומזים, רמזים תלת מימדיים ומינוף נתונים באינטרנט, ועוד רבים אחרים. ניתן לבצע זיהוי במכשיר או דרך האינטרנט.
ייחודית למערכת של אפל היא היכולת של משתמשים ליצור אינטראקציה עם המידע שנוצר. לדוגמה, אם מערכת הזיהוי נכשלה בזיהוי נכון של אובייקט, המשתמש יכול להזין את ההערה הדרושה באמצעות פקדים על המסך. בהתגלמויות מסוימות, משתמשים יכולים לשלוח את נתוני התצוגה החיה למכשיר אחר דרך רשת אלחוטית. ניתן להוסיף הערות, כגון עיגולים או טקסט, לתמונה ושני משתפי הפעולה יכולים ליצור אינטראקציה זה עם זה באמצעות תקשורת קולית.
אולי המעניין ביותר בפטנט '548 הוא תצוגת מסך מפוצלת המופעלת על ידי הפרדת התצוגות החיות והמחשב שנוצרו בשני חלונות נפרדים. החלונות שנוצרו על ידי המחשב יכולים להשלים את משימות הזיהוי הרגילות כמתואר לעיל, עם הזנה ידנית זמינה, או שהוא יכול לבנות סט חדש לחלוטין של נתונים.
בדוגמה שניתנה, משתמש צופה במרכז העיר סן פרנסיסקו בחלון התצוגה החיה בזמן שנכס התמונה שנוצר על ידי המחשב משרטט תרכובת תלת מימד של הסצנה בזמן אמת. במקרה זה, ניתן להשתמש בנכס שנוצר כדי לחשב מסלול נסיעה עם סמנים שהוזנו ידנית שיישלחו למשתמש שני. לאחר מכן, הנמען יכול להשתמש בשכבת העל שנוצרה בתצוגת המצלמה שלו ולהקיש על נקודות עניין כלולות, הנקראות סמנים, כדי להפעיל אפליקציות תקשורת.
אם לוקחים את הרעיון צעד קדימה, ניתן לסנכרן את נתוני ה-AR במסך מפוצל בין שני מכשירים, כלומר התצוגות שנוצרו בזמן אמת והמחשב של מכשיר ראשון יוצגו בשני ולהיפך. זה יכול להיות שימושי אם שני משתמשים ניסו למצוא זה את זה במקום לא ידוע או כאשר משתמש רוצה לתת הנחיות בסיסיות.
איור של סנכרון מסך מפוצל.
ברוב התגלמויות, ניתן למנף חיישנים משובצים שונים כמו תנועה ו-GPS כדי לשפר את הדיוק וקלות השימוש.
דוגמאות אחרות לשימוש ב-AR כוללות אבחון וטיפול רפואי שבהם רופא יכול לחלוק תצוגה חיה עם מטופל, עם צילום רנטגן או מידע חיוני אחר.
הפטנט של אפל '548 הוגש לראשונה ב-2010 וזוכה לזכותו של ברט בילבריי, ניקולס החמישי קינג ואלכסנדר פאנס כממציאיו.