אפל ממשיכה לרדוף אחרי טכנולוגיית בקרת מחוות תלת מימד באוויר, וביום שני קיבלה פטנט על מערכת ראיית מכונה המסוגלת לזהות תנועות ידיים אנושיות בדיוק מדהים.
משרד הפטנטים והסימנים המסחריים בארה"ב העניק לאפל פטנט בארה"במס' 9,002,099עבור "הערכה מבוססת למידה של תנוחת היד והאצבע", המצאה המתארת שיטות שבאמצעותן מערכת מיפוי תלת מימד אופטית יכולה להבחין בתנועת היד של המשתמש בצורה מדויקת יותר על ידי יישום אלגוריתמי למידה מיוחדים.
באמצעות טכנולוגיית הפטנט החדשה של אפל, חומרת מיפוי תלת-ממד תוכל להבחין בין סימן שלום לבין אגרוף קפוצ, גם אם חלק מהיד של משתמש נחסם על ידי עצם זר. עבור יישומים כמו בקרת מחוות באוויר, הדיוק מאפשר עיבוד תנוחה מפורט יותר, אשר בתורו פותח את הדלת לספרייה נרחבת של סכימות בקרה.
הפטנט מסתמך על חומרת הדמיה תלת מימדית המסוגלת ליצור מפות עומק של סצנה בדיוק גבוה למדי. על ידי עיבוד מפות אלה, בידוד ציוני דרך בידיים, שחזור של פקסימילית שלד דיגיטלי והקצאת מיקום ציוני דרך זו ביחס לזה, מערכת למופת יכולה לקבוע במדויק את תנוחות הידיים.
אפל כבר מחזיקה בפטנטים הקשורים למיפוי עומק, כולל IP שנרכש באמצעות ארכישה 2013של PrimeSense, חברה ישראלית הידועה בחישת תנועה וסריקת תלת מימד בחומרה ובתווך. טכנולוגיית PrimeSense עמדה מאחורי חיישן ה-Kinect של מיקרוסופט ל-Xbox 360, המאפשר לגיימרים לשלוט במכשיר שלהם באמצעות מחוות ידיים וגוף.
העברת הפטנט הראשון של PrimeSense שחצה את שולחן ה-USPTO הגיעהאֶשׁתָקַדעבור פתרון מיפוי תלת מימדי מבוסס הקרנה שישמש עמוד שדרה מוצק להמצאה של היום.
מערכת זיהוי טיפוסית זקוקה לפחות לכמה מאפיינים ציוני דרך כדי להתחיל להעריך את תנוחת היד של המשתמש, או מחווה, בדרך כלל מגיעה מקבוצה הכוללת קצה אצבע, מפרק, כף יד ובסיס היד. נתוני עומק הקשורים ל"טלאים" אלו נאספים לתוך פחים לאחזור מאוחר יותר על ידי מנוע למידה. הזנת רצף של מפות עומק ליחידת עיבוד, המערכת משווה ועומדת בניגוד בין מתארי טלאים למסד נתונים של קינמטיקה ידועה כדי לנתח את מיקום היד או האצבע, מסלול, יחס מרחבי ומדדים אחרים.
חשוב לציין, הפטנט של אפל לוקח בחשבון חסימת ידיים חלקית. אם מכשיר מיפוי תלת-ממדי אינו מסוגל לראות את ידו של משתמש, נובע מכך שלא ניתן לקבוע באופן סביר את היציבה. עם זאת, אם ידו של משתמש מוסתרת רק חלקית מהעין, אולי על ידי ידו השנייה של המשתמש או אדם, עדיין עשויה להיות הערכה סבירה של ציוני דרך
על ידי התעלמות מטלאים של תמונה המכילים תכונות חסומות, או לחילופין הכללת טלאים עם ציוני דרך חסומים אך התעלמות מפחים חסומים עם תכונות נסתרות, ניתן לקבל מתאר מדויק של סצנה נתונה. יישום מרחקים וקינמטיקה ידועים המאוחסנים במסד נתונים, כמו גם הוספה למסד הנתונים האמור לאורך זמן, מביאים לתנועות ידיים ונתוני מיקום אמינים.
שאר הפטנט יפרט יותר לגבי אלגוריתמי אומדן מיוחדים, חישובי מידת ביטחון, נוסחאות שקלול ועוד.
פטנט תנוחת היד והאצבע של אפל הוגש לראשונה במרץ 2013 וזוכה לזכותו של שי ליטבק, ליאוניד בריילובסקי ותומר יניר כממציאיו.
