visionOS

הודיעה אפלApple Vision ProבְּמַהֲלָךWWDC2023 ומערכת הפעלה שמתלווה אליה - visionOS. זוהי הפלטפורמה הראשונה של אפל שנבנתה עבור מחשוב מרחבי.

במקום לבנות אוזניות VR מבודדות המתמקדות בהעברת משתמשים לעולמות אחרים או סט של משקפי AR מוגבלים שמכסים אפליקציות על העולם האמיתי, אפל בחרה בשילוב של שניהם. בעיקר, visionOS היא מערכת הפעלה במציאות מעורבת שיכולה להתאים את עצמה לצרכי המשתמש, בין אם זה בידוד מוחלט או מחשוב מוגבר ידידותי לחברתי.

תצוגת הבית פועלת כמרכז מערכת ההפעלה בכך שהיא פועלת כמפעיל אפליקציות ובוחרת סביבה. אייקונים צפים וחלונות אפליקציה משקפים את האור בחדר ומטילים צללים.

Apple Vision Pro הוא המוצר הראשון של אפל שמריץ את visionOS, אבל זה לא יהיה האחרון. השמועות מצפות שבסופו של דבר היא תניע סט משקפי AR שזכה לכינויזכוכית תפוח.

visionOS 2.0

visionOS 2נחשף במהלך WWDC 2024. הוא מכיל כמה שיפורים חדשים באיכות החיים כמו מחוות ניווט חדשות ונגן וידאו טוב יותר של Safari.

אפל חשפהApple Intelligenceגם, אבל זה לא מגיע ל-Apple Vision Pro בהשקה. זה יכול להיכלל בעדכון עתידי של visionOS 2 או אפילו visionOS 3, אבל הוא מגיע לפלטפורמה.

למפתחים יש יותר ממשקי API ליצירת חוויות מרחביות ואפליקציות תלת מימד. משתמשים יכולים להמיר תמונות דו-ממדיות לתמונות תלת-ממד מרחביות עם אפקטים סטריאוסקופיים, וניתן לארגן מחדש את תצוגת הבית.

המחוות החדשות עוזרות לטפל בתלונות מגרסת מערכת ההפעלה הראשונה. משתמשים יכולים להסתכל בגב ידם כדי למצוא כפתור שפותח את תצוגת הבית, או להפוך את ידם כדי לראות שורת מצב שפותחת את מרכז הבקרה.

visionOS: הולך למרחב

visionOS מספקת למשתמשים קנבס אינסופי להצבת אפליקציות במרחב תלת מימדי. אפליקציות יכולות להופיע כחלונות דו-ממדיים, לכלול אובייקטים תלת-ממדיים הנקראים קישוטים, או להתרחב כדי למלא חלל בנוף סוחף.

לְעַצֵב

אפליקציות קיימות כמוספארייופיע כחלון דו מימדי שמרחף באוויר, אבל יש לו תפריטים מתרחבים ושורת כתובות שמרחפת מחוץ לחלון. אייפד ואייפוןאפליקציות מוגבלות לגבול החלון שלהן בדומה לצפייה באפליקציה על צג.

תצוגת הבית ממקמת סמלים בחלל שלך או בתוך נוף סוחף

ה-Home View נראה כמו שילוב שלtvOSוwatchOS. לסמלים עגולים המסודרים ברשת יש אפקט 2.5D המופיע בעת אינטראקציה או התבוננות בהם.

מצלמות לוכדות את החדר שמסביב למשתמש ומעבירות אותו לצגים הפנימיים. כאשר Apple Vision Pro פועל, המשתמש יכול לראות ייצוג כמעט מושלם של העולם האמיתי עם עומק.

נראה שלאובייקטים וחלונות יש נוכחות פיזית עם עוגני מיקום, צללים ושקיפות.ARKitמשחק חלק בפיתוח חוויות, אבל צריך לבנות איתם סצנות תלת מימדSwiftUIו- RealityKit.

מחוות ושליטה

תנועות ידיים, מעקב עיניים ובקרות קוליות מאפשרות מניפולציה של תוכנה ללא חומרה נוספת. יש מקלדת וירטואלית, אבל משתמשים יכולים להשתמש במקלדות בלוטות', משטח המעקב הקסום או בקרה אוניברסלית מ-Mac לצורך קלט.

מחוות פשוטות שולטות באפליקציות ובחוויות

מעקב עיניים מאפשר למשתמשים להסתכל על אובייקט שהם רוצים ליצור איתו אינטראקציה. בחירה או אחיזה של חפצים מתבצעת בתנועת צביטה באצבע.

הבט בשדה טקסט, צבט, ואז דבר או הקלד כדי למלא אותו. הגדרה להפעלת דיבור לטקסט בעת הסתכלות בסמל המיקרופון מופעלת כברירת מחדל.

אובייקטים יבינו היכן נמצא המשתמש ומה ידיהם עושות להמשך אינטראקציה. לדוגמה, הנחת יד עשויה לאפשר לפרפר וירטואלי לנחות על אצבע.

אפשר להפסיק אפליקציות בכוח על ידי החזקת הכתר הדיגיטלי והלחצן העליון למשך מספר שניות. לחלופין, אם נראה שהמעקב כבוי, כיול מחדש על ידי לחיצה על הכפתור העליון ארבע פעמים ברציפות.

הקש פעמיים על Apple Watch

נראה שאפל הכינה את המשתמשים ל-Double Tap ב-Apple Vision Pro על ידי הצגת מחווה דומה עבורApple Watch Series 9וApple Watch Ultra 2. כאשר משתמשים מבצעים תנועת צביטה עם האגודל ואצבע נוספת פעמיים, הוא מפעיל את הכפתור הפעיל ב-Apple Watch.

הקשה כפולה על Apple Watch אפשרית בזכות אלגוריתמים מתקדמים ו-S9 SiP המעבד אותות חיישנים מרובים. Apple Vision Pro מסוגל לפרש את המחווה באמצעות מצלמות, אך Apple Watch עשוי להוסיף אלמנט נוסף לתכונת הבקרה הזו בעדכון עתידי.

FaceTime

למרות שהמשתמש יסתיר את פניו על ידי אוזניות,FaceTimeעדיין אפשרי ב-Apple Vision Pro. אתה תראה משתתפים אחרים דרך חלונות צפים בזמן שתוצג באמצעות פרסונה - ייצוג דיגיטלי של עצמך.

FaceTime היא תכונה ב-visionOS

דמותו של משתמש נוצרת על ידי סריקת הפנים שלו עם מצלמות Apple Vision Pro. המודל התלת-ממדי נראה כמו המשתמש אבל יש בו אלמנט של עמק מוזר מכיוון שהוא נוצר במלואו ממוחשב.

ניתן לראות עד תשעה חלונות צפים במהלך שיחת FaceTime. המגבלה הרגילה של 32 משתתפים עדיין קיימת, אך לא כולם יהיו גלויים.

וידאו מרחבי

בעלים של אאייפון 15 פרו או אייפון 15 פרו מקסרִיצָהiOS 17.2יכול להקליט וידאו מרחבי שניתן לצפות בו ב-Apple Vision Pro. זהו סרטון תלת מימד שהוקלט ב-1080p ו-30Hz.

לכידת וידאו מרחבי באייפון

ניתן להקליט וידאו מרחבי גם כאשר לובשים את Apple Vision Pro. עם זאת, זה עשוי להתגלות קצת מביך, במיוחד בסביבות חברתיות.

למרות שהרזולוציה וקצב הפריימים אינם אידיאליים, הם לא צריכים ליצור חוויות גרועות באוזניות. מכשירי אייפון עתידיים אמורים להיות מסוגלים להקליט סרטוני 3D באיכות גבוהה יותר, אבל מה שנלכד היום מספיק לצפייה בתוך Apple Vision Pro.

אפקט התלת מימד אפשרי על ידי שימוש במצלמה הראשית ובמצלמה רחבה במיוחד כדי לצלם וידאו מופרד אופטית. כאשר כל סרטון מושמע בתצוגה נפרדת באוזניות, עיני המשתמש יוכלו לראות סרטון תלת מימד, כל עוד הוא צולם בצורה נכונה.

אפליקציית Apple TV מציעה גם סרטי תלת מימד. אפל טוענת כי יותר מ-150 כותרים תלת-ממדיים היו זמינים בהשקה לצד קומץ של סרטוני 8K סוחפים לחלוטין.

בִּטָחוֹן

ל- Apple Vision Pro יש סוג חדש של אבטחה ביומטרית - מזהה אופטי. הוא סורק את הקשתית של המשתמש כדי לאמת כניסות, רכישות ועוד.

זיהוי אופטי סורק את הקשתית של המשתמש

בכל מקום שאדם היה משתמש בוTouch IDאוֹמזהה פניםזה המקום שבו זיהוי אופטי יעבוד. בדומה למערכות ביומטריות אחרות, נתוני הקשתית מוצפנים ומאוחסנים ב-Secure Enclave כך שלעולם אינם עוזבים את המכשיר.

אפל גם מונעת מאפליקציות לקבל נתונים יקרי ערך מהמצלמות והחיישנים של המכשיר. בעוד שמעקב עיניים והעברת וידאו מתרחשים במהלך השימוש באפליקציה, זה קורה בשכבה נפרדת שלא ניתן לגשת אליה לאיסוף נתונים של צד שלישי.

כמו באייפון או אייפד, כאשר הגיע הזמן לאמת משהו באמצעות Optic ID, המשתמש מאשר בלחיצה כפולה על הכפתור העליון. זה מונע אישור מקרי רק על ידי הסתכלות בשדה תשלום.

הִתפַּתְחוּת

אפל סללה דרך ברורה למפתחים לעקוב אחריהם בעת יצירת אפליקציות ותוכן עבור visionOS. עם זאת, מפתחים היו מוגבלים בהשקה על ידי גישה רק באמצעות הפעלות אישיות מוגבלות או כלי סימולטור ב-Xcode.

היו רק כ-600 אפליקציות מקוריות זמינות ב-Vision Pro בעת ההשקה. עם החומרה הזמינה ללקוחות ולמפתחים כאחד, יישומים נוספים ישוחררו לפלטפורמה במהירות האפשרית.

SwiftUI הוא הבסיס של קידוד עבור מחשוב מרחבי. יש לו כלים בעלי יכולת תלת מימד עם תמיכה בעומק, מחוות, אפקטים וסצנות.

RealityKit מספקת למפתחים את היכולת ליצור תוכן תלת מימדי, אנימציות ואפקטים חזותיים. הוא מסוגל להסתגל לתנאי תאורה פיזיים ולהטיל צללים.

ניתן להציב חלונות צפים בכל מקום

ARKit יכול לעזור לאפליקציה להבין את הסביבה של אדם עם דברים כמו הערכת מטוסים ושחזור סצינות. זה נותן לאפליקציות את היכולת להבין היכן נמצא קיר או רצפה פיזיים.

עם זאת, אפליקציות שנבנו עם ARKit אינן מוצגות באופן אוטומטי בתלת מימד. למעשה, אם אפליקציית AR שנבנתה עבור iPhone מופעלת ב-visionOS, היא תופיע כמישור דו-ממדי המציג תוכן כאילו היה באייפון.

אפילו אייקונים מקבלים טיפול 2.5D ב-visionOS

מפתחים יצטרכו להתחיל מחדש עם RealityKit עבור תוכן תלת מימד. אז לא, עדיין לא תתפסו פוקימונים בסלון שלכם עם חוויות AR מלאות, לפחות לא עד שנינטנדו ו-Niantic יפתחו אפליקציה במיוחד בשביל זה.

שימו לב שאפל נמנעה משימוש במונחים כלל-תעשייתיים עבור פלטפורמת המחשוב המרחבית שלה. האפליקציות הדו-ממדיות נקראות "חלונות", האובייקטים התלת-ממדיים נקראים "נפחים", וסביבות מלאות נקראות "מרחבים" במקום מונחים כמו אובייקטי AR או חוויות VR.

מהדורת visionOS והעתיד שלה

מחשוב מרחבי הוא טריטוריה חדשה עבור אפל, וייקח זמן עד שהמוצרים והתוכנות יבשילו. Apple Vision Pro היא רק ההתחלה בשנת 2024, עם דגם Apple Vision סטנדרטי שצפוי בשנת 2026 במחיר נמוך יותר ובסופו של דבר משקפי AR.

אפל שחררה את Apple Vision Pro ב-2 בפברואר לצד מערכת ההפעלה visionOS. גרסת הבטא עבור visionOS 2 יוצאת לדרך וההוצאה הסופית צפויה באמצע ספטמבר 2024.