סבסטיאן דה ווית, המפתח מאחורי אפליקציית הצילום הידני הפופולרית Halide, העמיד את מערכת המצלמות iPhone XS בקצב שלה. במבט מקיף לתוך היורים האחרונים של אפל, דה With מספק סקירה כללית של צילום חישובי, ומסביר כיצד טכנולוגיית הפחתת רעש עשויה ליצור תמונות סלפי שנראות משופרות באופן מלאכותי.
ב-צלילה עמוקה נרחבת, de With מתאר מדוע התמונות של האייפון החדש נראות שונות כל כך מאלו שצולמו על ידי האייפון X, למרות שחלק ניכר מהחומרה הועברה מהשנה שעברה. יש לציין שהמפתח מציע הסבר ל-אפקט החלקת העור לכאורהשעלה לכותרות בסוף השבוע.
צילום חישובי הוא העתיד
אפל הבינה מזמן שהעתיד של האייפון הוא לא בהכרח בחומרה שלו. זו הסיבה שהחברה נמנעת בדרך כלל מפרסום "מפרט טכני" כמו מהירות מעבד או זיכרון RAM, ובמקום זאת מתמקדת בביצועים בעולם האמיתי.
הדבר נכון גם לגבי המצלמה. במקום פשוט לדחוס יותר פיקסלים למצלמות שלה בכל שנה, אפל מתמקדת בשיפור הרכיבים הקיימים, וחשוב מכך, התוכנה שמניעה אותם. כפי שציין דה With, פיזיקה טהורה הופכת במהירות למכשול העיקרי לגבי כמה רחוק יכולה אפל לקחת את פלטפורמת המצלמה בגודל הכיס שלה. כדי לדחוף את האמנות הלאה, החברה מסתמכת יותר ויותר על התוכנה שלה לייצור chops.
אפליקציית צילום Halide
התוכנה הזו היא שעשתה הבדל כה משמעותי עבור iPhone XS.
סמנכ"ל השיווק העולמי, פיל שילר, במהלך חשיפת האייפון בחודש שעבר, דן באורכים אליהם עובר מעבד אותות התמונה (ISP) בעיצוב אפל בעת עיבוד תמונה.
עם iPhone XS, אפליקציית המצלמה מתחילה לצלם תמונות ברגע שפותחים את האפליקציה, עוד לפני שמשתמש לוחץ על כפתור הצילום. לאחר צילום תמונה, השפופרת אוספת סדרה של תמונות נפרדות, ממסגרות חסרות חשיפת יתר וכלה במסגרות שצולמו במהירויות תריס מהירות. לאחר מכן, תהליך בחירת תמונה בוחר את המסגרות המועמדות הטובות ביותר ומשלב אותן יחד ליצירת תמונה בטווח דינמי גבוה להפליא תוך שמירה על פרטים. ברור שלתהליך יש כמה השלכות לא מכוונות.
תביא את הרעש
כדי לגבות את כל הצילום החישובי הזה, אפליקציית המצלמה של אייפון XS צריכה לצלם הרבה תמונות, מהר מאוד.
בשירות המטרה הזו, המצלמה החדשה מעדיפה מהירות תריס מהירה יותר ו-ISO גבוה יותר. כאשר מהירות התריס מוגברת, פחות אור נקלט על ידי החיישן. כדי לפצות על הירידה באור, אפליקציית המצלמה מגדילה את ה-ISO, מה שמחליט עד כמה החיישן רגיש לאור. אז פחות אור נכנס פנימה, אבל המצלמה רגישה יותר לאור ומסוגלת להוציא תמונה חשופה כהלכה.
דגמו תמונות RAW מאייפון X (משמאל למעלה ולמטה) ומאייפון XS RAW. | מקור: סבסטיאן דה ווית
עם זאת, ככל שה-ISO עולה, הרעש מתחיל להופיע בתמונה. צריך להסיר את הרעש הזה איכשהו, וזה המקום שבו ה-Smart HDR והצילום החישובי של אפל נכנסים לתמונה.
הפחתת רעש רבה יותר מובילה לתמונה חלקה יותר למראה. זה חלק מהנושא שנראה ב"בעיית החלקת הסלפי" שאנשים דיווחו עליה.
הסיבה השנייה קשורה לניגודיות.
פחות ניגוד מקומי
ניגודיות מקומית היא מה שרוב האנשים מזהים כחדות בתמונה.
"בפשטות, קו מתאר כהה או בהיר צמוד לאור מנוגד או צורה כהה. הניגוד המקומי הזה הוא מה שגורם לדברים להיראות חדים", אומר דה ווית.
כאשר אפקט חידוד מוחל על תמונה, למעשה לא מתווספים פרטים, אך במקום זאת הקצוות הבהירים והכהים מוגברים, ויוצרים יותר ניגודיות ובכך את האשליה שהתמונה חדה יותר.
HDR חכם באייפון XS וב-XS Max עושה עבודה טובה בהרבה בחשיפת תמונה, מה שמקטין את הניגודיות המקומית ומביא לתמונה חלקה יותר ממה שהיא הייתה אחרת.
מצלמות להמונים
הבעיות הגדולות ביותר בשיטת צילום זו מתעוררות בעת צילום RAW. De With משער שה-iPhone XS עדיין נותן עדיפות לזמני חשיפה קצרים יותר ו-ISO גבוה יותר כדי לקבל את תמונת ה-Smart HDR הטובה ביותר, גם בעת צילום RAW - שאינו מקבל תועלת מ-Smart HDR. זה משאיר תמונות חשופות מדי ולפעמים מפוצצות עם פרטים גזורים ואינם ניתנים להחזרה.
גם צילומי RAW לא מקבלים הפחתת רעש, ועם הרעש הנוסף מה-ISO הגבוה יותר, זה גורם לתמונות במראה גרוע במיוחד. זה אומר כשאתה מצלם RAW, אתהחוֹבָהלצלם באופן ידני ולחשוף בכוונה תת חשיפה של התמונה.
דגמו תמונות RAW מ- iPhone X (משמאל) ו- iPhone XS Max. | מקור: סבסטיאן דה ווית
ההחלטות לכאורה של אפליקציית המצלמה של אפל משפיעות על אפליקציות צד שלישי - כגוןHalide- וזו הסיבה ש-de With אומר שהם עובדים על תכונה קרובה בשם Smart RAW. הוא משתמש במעט מהקסם החישובי שלהם כדי להוציא יותר פרטים מתמונות RAW תוך הפחתת רעש. תכונה חדשה זו תיכלל בעדכון הקרוב של Halide.
למרות שהרבה מהניתוחים נשמעים קריטיים, בעיות שנחוו ביד האלגוריתמים של אפל הן עד כה חריגות. רוב תמונות הסלפי צולמו באור מאוד לא מחמיא, וללא השינויים שאפל ביצעה, הם יהיו חשופים גרוע ומלאי רעש. אפל כנראה טעתה בזהירות על ידי הסרת יתר של הרעש ויצרה תמונות חלקות מדי, אך ניתן למשוך את זה לאחור.
חשוב מכך, לאפל יש את היכולת להתעסק עם הקושחה שלה כדי לפתור את הבעיותדרך העדכונים הבאיםאם היא תבחר כך.
כפי שראינו לאחרונההשוואת תמונות אייפון XS לעומת X, ה-iPhone XS וה-XS Max עם Smart HDR שיפרו משמעותית את יכולות צילום התמונות, והרוב המכריע של המשתמשים כבר רואים את היתרונות.
