אפל חוקרת אודיו מרחבי בסגנון HomePod עבור Apple AR

אפל ARיכול להכיל אודיו מרחבי, כפי שכבר נעשה בו שימוש ב-HomePod, HomePod mini או AirPods Pro - אך גם מוקלט במכשירים קומפקטיים.

יכול להיות שעדיין אנחנו חושבים על AR כמדיום חזותי, אבל אפל שוב חקרה את הצד האודיו של כל החוויה. בהמשך לעבודות חקירה קודמותביצוע צליל שמע בתלת מימד, כעת היא חוקרת דרכים נוחות יותר להשיג זאת.

"מערכת אודיו בעלת רכיבי שמע וטווחים," היא אפטנט שהוענק לאחרונהשעוסק באיך לחקות צליל תלת מימדי מדויק עם מינימום ציוד.

"בשיטות קיימות של שחזור תמונת קול לצופה במרחב וירטואלי, המיקרופונים המופצים סביב החלל בפועל חייבים להיות מרווחים זה מזה כדי להסתמך על הצליל שזוהה לצורך לוקליזציה של המקור", אומר אפל.

"בהתאם לכך, שיטות כאלה אינן מאפשרות שימוש במערך מיקרופון אחד וקומפקטי עבור לוקליזציה של מקור הקול, ועלויות הציוד וההתקנה של שיטות כאלה יכולות להיות משמעותיות", נכתב.

יש גם את הבעיה שברגע שסדרה שלמה של מיקרופונים מרווחים זה סביב זה לצורך הקלטה, זה לוקח זמן להזיז אותם. מה שאפל רוצה היא מערכת פשוטה יותר שמתאימה גם להקלטות והשמעה ניידים.

זה חשוב במיוחד עבור Apple AR מכיוון ששמע הוא חיוני כדי לגרום לחוויה להרגיש אמיתית. "סביבות מציאות מדומה ומציאות רבודה יכולות לכלול מקורות סאונד וירטואליים, שהם מקורות קול שנוצרו על ידי מחשב במרחב וירטואלי", אומרת אפל.

פרט מהפטנט המראה את סידור מכשיר הקלטה קומפקטי

"המרחב הוירטואלי יכול למפות למרחב ממשי", הוא ממשיך. "לדוגמה, משתמש יכול ללבוש אוזניות בחדר והאוזניות יכולות לשחזר צליל למשתמש כאילו הקול הוא קול של עמית מול המשתמש, למרות שהקולגה נמצא בעצם בחדר אחר".

"כשהמשתמש נע בחדר, למשל, כשהמשתמש הולך קדימה חמישה צעדים, הצליל המשוחזר יכול להשתנות", אומר הפטנט.

כדי להראות חזותית תנועה או מיקום מחדש של אובייקטים וירטואליים, ההקלטה חייבת להיות מסוגלת לזהות במדויק את מיקום המקור. "כאשר המיקום מזוהה, ניתן לשחזר את ההקלטה למשתמש בצורה שתמקם את הצליל המשוחזר כאילו הסאונד מגיע ממיקום דומה בחדר בו נמצא המשתמש", נכתב בפטנט של אפל.

אולי אין מנוס מהצורך במערך של מיקרופונים, אבל הפטנט הזה מציע להוסיף להם מה שאפל מכנה "מכשיר לכידת עומק". כאשר השניים יכולים "לזהות ענן נקודות ושדה קול מקומי", ומעבד יכול "לשחזר שדה קול גלובלי" מהנתונים שלהם, הוא יכול "לעבד סביבת מציאות מדומה למשתמש".

במילים אחרות, כל מערכת שבה משתמשים כדי להבין שעמית וירטואלי נמצא במרחק של מטר משמאלכם, אודיו של Apple AR יכול להשמיע את הדיבור שלו כאילו הוא כל כך קרוב, ובכיוון הזה.

המפתח הוא במכשיר לכידת עומק זה. הפטנט מתאר כל מכשיר אפשרי כזה, אבל הוא מתרכז במצלמות.

"לדוגמה, מערך מצלמות עשוי להיות מערכת סטריאוסקופית בעלת שתי מצלמות או יותר", אומר הפטנט. "מספר מצלמות יכולות להיות צמודות זו לזו ו/או מרווחות אחת מהשנייה ולהסתכל על אותו חלל".

"כל מצלמה יכולה לזהות את אותו חלל מנקודת תצפית אחרת, וכך, על ידי ניתוח נתוני תמונה מכל מצלמה, ניתן לקבוע מרחק ממערך המצלמה 106 נקודות ו/או עצמים שונים בתוך התמונות", הוא ממשיך .

הפטנט נוגע גם לאופן שבו ניתן להשמיע את האודיו הזה למשתמש, אבל בעיקר מדובר בהקלטה מדויקת - או ממסר - שלו תחילה.

השמעת אודיו ליצירת צליל מרחבי תלת מימדי באופן אותנטי

"לדוגמה, כאשר אובייקט מפיק קול נע לאחור בתוך שדה הראייה, למשל, הרחק ממיקום מכשירי הלכידה, ניתן לכוונן את ההשהיה וההגברה של אות השמע כדי להציג צליל וירטואלי המתאים לצליל המופק כנסוג מ-[ המשתמש בסביבה הוירטואלית", אומרת אפל.

"באופן דומה, המשתמש יכול לנוע בסביבת המציאות המדומה כדי לשנות נקודת מבט ביחס למקור הקול הווירטואלי", הוא ממשיך, "...וככל שהמשתמש זז, העיכוב וההגברה של אות האודיו עשויים להיות מותאם לעיבוד צליל וירטואלי כמגיע מהמיקום הנכון..."

המצאה זו מיוחסת לזכותם של שני ממציאים, מרטין אי. ג'ונסון וג'ונתן ד. שיפר. שניהם זוכים בעבר בפטנט שונה להקלטת אודיו מרחביפחות מיקרופונים מהרגיל.

הישאר מעודכן בכל החדשות של אפל ישירות ממךHomePod. אמור, "היי, סירי, שחק ב-AppleInsider," ותקבל את הפודקאסט העדכני ביותר של AppleInsider. או תשאל את שלךHomePod miniעבור "AppleInsider Daily" במקום זאת ותשמע עדכון מהיר ישירות מצוות החדשות שלנו. ואם אתה מעוניין באוטומציה ביתית ממוקדת אפל, אמור "היי, סירי, שחק את HomeKit Insider", ותקשיב לפודקאסט המיוחד החדש ביותר שלנו בעוד רגעים.