הכונן של אפלאפל ARחומרה עם שמע באיכות גבוהה הובילה למחקר כיצד ליצור צליל מרחבי מלא מבלי שמפתחים יצטרכו להקליט עם מספר גדול של מיקרופונים.
לאפל ישנרדף בהתמדההרעיון ש-Apple AR דורשאודיו מעולהכמו גם וידאו ב"אפל גלאס", או מכשירים אחרים. הדחף הזה כלל בעבר פיתוח אפורמט שמע חדש, אך כעת אפל בוחנת כיצד ניתן להקליט אודיו כזה.
"עיבוד אותות אודיו עבור אודיו מרחבי," הוא אפטנט שהוענק לאחרונההעוסקת בביצוע הקלטות אודיו באיכות גבוהה שעובדות בחלל תלת מימדי, ללא צורך בהכרח בציוד רב.
"ניתן לתאר עיבוד אודיו תלת מימדי כעיבוד של אות אודיו (כגון אות מיקרופון או תוכן שמע מוקלט אחר)", אומרת אפל, "כדי להפיק צליל המופק על ידי רמקולי סטריאו, רמקולי סאונד סראונד, מערכי רמקולים, או אוזניות שנתפסות על ידי המאזין כמגיעות מכיוון מסוים או מסביב למאזין במרחב תלת מימדי".
"לדוגמה", ממשיך הפטנט, "אפשר להפיק אחד או יותר ממקורות סאונד וירטואליים כאלה בתוכנת סאונד שתיתפס על ידי המאזין כמאחורי, מעל או מתחת למאזין, או להפנות אותו מצד אחד של המאזין. לאחר".
היתרון של אודיו תלת מימד הוא בכך שהוא הופך את Apple AR לחוויה עוטפת ומציאותית יותר. עם זאת, אפל אומרת שהאופן שבו אודיו נלכד יכול להיעשות בשתי דרכים, שאליהן היא מתייחסת כלינארית או פרמטרית.
בליבה, השיטה הליניארית פירושה הקלטת מיקרופונים מרובים המסודרים למעשה במרחב פיזי תלת מימדי. השיטה הפרמטרית פירושה חישוב כיצד להשמיע שמע כך שנראה כאילו הוקלט בסביבה כזו.
"[במערכות ליניאריות] ייתכן שיהיה צורך במספר גבוה של מיקרופונים כדי להשיג רזולוציה מרחבית איכותית", אומר הפטנט. "עם זאת, מספר המיקרופונים הקיימים במכשירים יכול להיות מוגבל הן על ידי גורמים פיזיים (כגון צריכת שטח וצריכת חשמל) והן על ידי גורמים כלכליים (כגון עלות ומורכבות המכשיר)."
ללינארית יש את היתרון שהוא מציב "עומס חישובי קל על המעבד", מכיוון שהאלמנט המרחבי מגיע מהמקום בו הוקלט השמע ביחס לכל המיקרופונים.
"לעומת זאת", טוענת אפל, "עיבוד צליל מרחבי פרמטרי יכול להציע רזולוציה מרחבית משופרת במידה ניכרת עבור ספירת מיקרופונים נמוכה יחסית, אשר מושגת על ידי ביצוע כמה הנחות יסוד לגבי שדה הקול המוקלט".
פרט מהפטנט המראה זרימת עבודה אחת לעיבוד ללקיחת סאונד מוקלט והשמעה מחדש בחלל תלת מימדי
"לדוגמה, הנחה אחת כזו היא שבכל נקודת זמן ובכל תדר (כלומר בכל תת-פס מעובד) יש רק מקור סאונד פעיל אחד", ממשיך הפטנט. "
עם זאת, זה לא בהכרח נכון, וכאשר "הנחה זו מופרת, בתנאים בעלי הדהוד מתון, מהדהוד גבוה או מפוזר, אודיו הפלט המתקבל עלול להיות מזוהם בחפצי עיבוד לא רצויים."
כתוצאה מכך, הפטנט עוסק בשיטות לעיבוד אודיו כדי "להגדיל את הרזולוציה המרחבית הניתנת להשגה ממערך מיקרופונים עם ספירה נמוכה של מיקרופונים, תוך הפחתת הסבירות לעיבוד חפצים והפחתת עלות או מורכבות העיבוד".
הפטנט של אפל מפרט כיצד ניתן לעבד כל אודיו תלת מימדי על מנת שיושמע דרך כל מערכת, לא ספציפית AR. "המערכת (שיכולה ללבוש צורה של מכשיר או פריט ייצור) יכולה להיות, למשל, מחשב נייד, מחשב שולחני, טלפון נייד, טלפון חכם, מחשב לוח, רמקול חכם או אינפורמציה. מערכת לרכב או לרכב אחר", נכתב.
כבר יש לנו אתMacBook Pro בגודל 16 אינץ'אשר מתיימרת שיש לה רמקולים באיכות אולפן ורמקולים משופרים לעומת דגמים קודמים בשלדה. החלת הפטנט החדש של אפל עשויה לגרום לכך שדגמים עתידיים יוכלו להקליט אודיו תלת מימד ללא מערך של מיקרופונים חיצוניים.
פטנט זה מיוחס לשמונה ממציאים, כולל Juha O. Merimaa, Martin E. Johnson, וג'ושוע ד. אטקינס. שלושת אלה פורטו בעבר ביישומים קשורים הקשורים אליהםיצירת אודיו תלת מימד מדויקעבור AR.
