זיהוי כתב היד של אפל ב-עיפרון אפלמסתמך על זיהוי שבץ, כך מגלה ראיון עם קרייג פדריגי, בעוד שתכונות חדשות כמו Scribble של iPadOS מסתמכות על כמויות אדירות של עיבוד למידת מכונה.
הוצג כחלק מ-iPadOS 14,לְשַׁרבֵּטמאפשר למשתמשים למלא שדות טקסט וטפסים באמצעות Apple Pencil, ללא צורך להקליד שום דבר. הוא משיג זאת על ידי ביצוע עיבוד מובנה במקום גרסאות מבוססות ענן, כמו גם ניצול של למידת מכונה כדי לשפר את הדיוק שלה.
מדבראֶלמכניקה פופולרית, סמנכ"ל הנדסת תוכנה של אפלקרייג פדריגימסביר כיצד נוצר זיהוי כתב היד של Apple Pencil. הכל התחיל ב"איסוף נתונים" בכך שביקשו מאנשים ברחבי העולם לכתוב דברים.
"אנחנו נותנים להם עיפרון, ואנחנו נותנים להם לכתוב מהר, אנחנו נותנים להם לכתוב לאט, לכתוב בהטיה. כל הווריאציה הזו," אמר פדריגי. "אם אתה מבין את המשיכות וכיצד ירדו המשיכות, זה יכול לשמש כדי לבלבל מה נכתב."
שילוב של זיהוי המבוסס על שבץ עם חיזוי אופי ומילים אומר גם שהרבה עיבוד צריך להתרחש. מכיוון שהמהירות היא המהות, הדבר מבטל את השימוש בעיבוד מבוסס ענן של זיהוי כתב יד, ובמקום זאת אילץ את אפל להיכנס למערכת הכוללת עיבוד במכשיר.
"זה חייב לקרות בזמן אמת, כרגע, במכשיר שאתה מחזיק", מתעקש פדריגי, "מה שאומר שכוח החישוב של המכשיר צריך להיות כזה שהוא יכול לבצע את רמת העיבוד הזו באופן מקומי".
המומחיות של אפל בעיצוב שבבים הובילה לחדשאייפד אייר 4שיש אתA14 Bionic, ה-SoC המהיר ביותר של אפל בעיצוב עצמי, הכולל 11.8 מיליארד טרנזיסטורים, מעבד 6 ליבות, ארכיטקטורה גרפית חדשה של 4 ליבות, ומנוע עצבי בן 16 ליבות המסוגל לבצע עד 11 טריליון פעולות בשנייה. אפל אפילו הוסיפה מאיצי למידת מכונה מבוססי מעבד, מה שגורם למשימות למידת מכונה לרוץ עד פי 10 מהר יותר.