رفتن به محتوای اصلی
توضیح کوهستانعکاسی محاسباتیکالبدشکافی فناوری۱۹ مرداد ۱۴۰۵، ۱۹:۱۲· 4 دقیقه مطالعه· #4 از 5 در فناوری

کالبدشکافی عکاسی محاسباتی: چرا دوربین گوشی شما دیگر واقعاً یک «دوربین» نیست؟

گوشی‌های هوشمند امروزی برای ثبت تصاویر خیره‌کننده، به جای تکیه بر لنزهای بزرگ، از الگوریتم‌های هوش مصنوعی و ترکیب ده‌ها عکس استفاده می‌کنند. در واقع، عکسی که می‌گیرید یک ثبت اپتیکال ساده نیست، بلکه تصویری است که توسط کامپیوتر تولید و تفسیر شده است.

به قلم آیدا امینی

مهندسان نرم‌افزار و شرکت‌های فناوری 50%عکاسان سنتی و منتقدان 30%محققان و دانشگاهیان 20%
مهندسان نرم‌افزار و شرکت‌های فناوری
معتقدند عکاسی محاسباتی کیفیت تصویر را دموکراتیزه کرده است.
عکاسان سنتی و منتقدان
نگران از بین رفتن اصالت و واقع‌گرایی در تصاویر هستند.
محققان و دانشگاهیان
بر تغییر مفهوم بنیادین عکس از یک ثبت فیزیکی به یک داده پردازش‌شده تاکید دارند.

نکات کلیدی

  • دوربین گوشی‌های هوشمند به جای تکیه بر لنزهای بزرگ، از الگوریتم‌های نرم‌افزاری برای تولید تصویر استفاده می‌کنند.
  • با هر بار فشردن شاتر، گوشی چندین فریم مختلف را ثبت و با هم ترکیب می‌کند.
  • هوش مصنوعی اجزای تصویر مانند چهره و آسمان را تشخیص داده و به صورت جداگانه بهینه‌سازی می‌کند.
  • افکت‌هایی مانند تار شدن پس‌زمینه (بوکه) در گوشی‌ها به صورت نرم‌افزاری جعل می‌شوند و اپتیکال نیستند.

شرکت‌های سازنده گوشی‌های هوشمند همواره در تبلیغات خود از عباراتی مانند «لنزهای حرفه‌ای» و «کیفیت در حد دوربین‌های DSLR» استفاده می‌کنند. اما فیزیک نور تغییر نکرده است. یک سنسور کوچک که پشت یک شیشه چند میلی‌متری قرار گرفته، از نظر فیزیکی نمی‌تواند نور کافی برای رقابت با یک دوربین حرفه‌ای را جذب کند. با این حال، عکس‌هایی که می‌گیریم خیره‌کننده هستند. راز این کیفیت در شیشه لنز نیست، بلکه در پردازنده‌های سیلیکونی نهفته است.[1]

این تغییر پارادایم با نام «عکاسی محاسباتی» (Computational Photography) شناخته می‌شود؛ گذار از ثبت اپتیکال به تولید دیجیتال. امروزه وقتی دکمه شاتر گوشی خود را فشار می‌دهید، در واقع یک پرده مکانیکی را برای برخورد نور به فیلم باز نمی‌کنید، بلکه یک اسکریپت نرم‌افزاری را اجرا می‌کنید که میلیون‌ها محاسبه ریاضی را در کسری از ثانیه انجام می‌دهد.[2][7]

بنیادی‌ترین توهم در عکاسی با گوشی‌های هوشمند مدرن این است که شما در حال گرفتن «یک» عکس هستید. در واقعیت، سیستم عامل گوشی حتی قبل از اینکه شما دکمه را لمس کنید، در حال ثبت مداوم یک بافر از فریم‌های متوالی است و حافظه موقت دوربین را با تصاویری از کسری از ثانیه قبل پر می‌کند.[1][4]

زمانی که در نهایت دکمه را فشار می‌دهید، گوشی چندین فریم با نوردهی پایین (برای حفظ جزئیات در بخش‌های روشن مانند آسمان) و چندین فریم با نوردهی بالا (برای بیرون کشیدن جزئیات از سایه‌های تاریک) را استخراج می‌کند. این تکنیک که به عنوان انباشت تصویر یا HDR+ شناخته می‌شود، پایه و اساس عکاسی موبایل است.[5]

در این مرحله، موتور عصبی (Neural Engine) یا پردازنده سیگنال تصویر (ISP) وارد عمل می‌شود. این پردازنده فریم‌ها را به طور کامل روی هم تراز می‌کند تا لرزش دست شما را خنثی کند. سپس پیکسل به پیکسل پیش می‌رود و بهترین نوردهی و واضح‌ترین جزئیات را برای هر نقطه انتخاب کرده و آن‌ها را در یک تصویر نهایی که از نظر فیزیکی غیرممکن است، ادغام می‌کند.[4]

اما گوشی فقط پیکسل‌ها را به صورت کورکورانه ترکیب نمی‌کند؛ بلکه به کمک هوش مصنوعی، آنچه را که می‌بیند «درک» می‌کند. این فرآیند که «بخش‌بندی معنایی» (Semantic Segmentation) نام دارد، به دوربین اجازه می‌دهد تا آسمان، چمن، پوست انسان و مو را از یکدیگر تشخیص دهد.[1]

اما گوشی فقط پیکسل‌ها را به صورت کورکورانه ترکیب نمی‌کند؛ بلکه به کمک هوش مصنوعی، آنچه را که می‌بیند «درک» می‌کند.

پس از تشخیص اجزا، الگوریتم‌ها قوانین متفاوتی را برای هر بخش اعمال می‌کنند. ممکن است سیستم به طور خودکار موها را شارپ‌تر کند، لکه‌های پوست را برای صاف‌تر به نظر رسیدن محو کند و اشباع رنگ آبی آسمان را افزایش دهد. یک دوربین سنتی صادقانه آنچه را که سقف سنسور دریافت کرده ثبت می‌کند، اما یک گوشی هوشمند صحنه را تفسیر کرده و چیزی را نقاشی می‌کند که فکر می‌کند «باید» آنجا باشد.[5]

یکی دیگر از فریب‌های جذاب، «حالت پرتره» (Portrait Mode) است. دوربین‌های حرفه‌ای پس‌زمینه تار (بوکه) را از طریق یک دیافراگم فیزیکی باز و یک سنسور بزرگ به دست می‌آورند. اما گوشی‌های هوشمند این اثر اپتیکال را با استفاده از نقشه‌برداری عمق و الگوریتم‌های نرم‌افزاری جعل می‌کنند.[2]

با استفاده از یک لنز ثانویه یا فوکوس خودکار دو پیکسلی، گوشی فاصله تا هر شیء در صحنه را محاسبه می‌کند. سپس یک فیلتر تاری نرم‌افزاری را روی هر چیزی که پشت سوژه قرار دارد اعمال می‌کند. به همین دلیل است که گاهی اوقات این سیستم اشتباه می‌کند و بخش‌هایی از مو یا لبه‌های عینک سوژه نیز به اشتباه تار می‌شوند.[2]

عکاسی در شب (Night Mode) شاید بارزترین نمونه از قدرت عکاسی محاسباتی باشد. در گذشته، عکاسی در محیط‌های کم‌نور نیازمند سه‌پایه و نوردهی طولانی بود. امروزه می‌توانید گوشی را برای چند ثانیه در تاریکی در دست نگه دارید و تصویری روشن و واضح دریافت کنید.[5]

مکانیسم حالت شب به این شکل است که گوشی ده‌ها نوردهی کوتاه انجام می‌دهد. سپس از ژیروسکوپ برای اندازه‌گیری میزان حرکت دست شما استفاده کرده، تصاویر را برای خنثی کردن لرزش تراز می‌کند و آن‌ها را برای انباشت نور روی هم قرار می‌دهد. این سیستم در واقع یک نوردهی طولانی را بدون ثبت تاری ناشی از حرکت، به صورت محاسباتی شبیه‌سازی می‌کند.[1][5]

این اتکای شدید به هوش مصنوعی یک تنش فلسفی ایجاد کرده است: آیا این هنوز یک عکس است؟ اگر گوشی در حال جایگزینی بافت‌های از دست رفته، حذف نویزها و گاهی حتی اضافه کردن جزئیاتی است که به صورت اپتیکال ثبت نشده‌اند، مرز بین عکاسی مستند و هنر دیجیتال کجاست؟[3][6]

با این حال، اکثر کاربران این معامله را پذیرفته‌اند، زیرا عکاسی محاسباتی تصاویری تولید می‌کند که با «حافظه» ما از یک لحظه تطابق بیشتری دارد. چشم انسان به طور طبیعی با سایه‌ها و روشنایی‌ها سازگار می‌شود؛ گوشی‌های هوشمند در واقع در تلاشند تا ادراک بصری انسان را شبیه‌سازی کنند، نه فقط فیزیک خام نور را.[5][6]

در نهایت، باید پذیرفت که دوربین گوشی هوشمند دیگر صرفاً ابزاری برای ثبت نور نیست؛ بلکه یک سنسور جمع‌آوری داده برای یک ابررایانه پردازش تصویر است. لنز و شیشه تنها نقطه آغاز این سفر هستند و جادوی واقعی در کدهای نرم‌افزاری اتفاق می‌افتد.[1][7]

اصطلاحات کلیدی

انباشت تصویر (Image Stacking)
تکنیکی که در آن چندین عکس با نوردهی‌های مختلف ترکیب می‌شوند تا تصویری با دامنه دینامیکی بالا و نویز کم تولید شود.
بخش‌بندی معنایی (Semantic Segmentation)
توانایی هوش مصنوعی در تشخیص اجزای مختلف یک تصویر (مانند آسمان، چهره، گیاه) برای اعمال ویرایش‌های متفاوت روی هر کدام.
ترکیب پیکسل‌ها (Pixel Binning)
فرآیندی در سنسور دوربین که اطلاعات چند پیکسل مجاور را برای جذب نور بیشتر در محیط‌های تاریک ترکیب می‌کند.

بررسی عمیق دیدگاه‌ها

مهندسان نرم‌افزار و شرکت‌های فناوری

معتقدند عکاسی محاسباتی کیفیت تصویر را دموکراتیزه کرده است.

از دیدگاه سازندگان گوشی‌های هوشمند و توسعه‌دهندگان الگوریتم‌ها، عکاسی محاسباتی یک پیروزی بزرگ برای دسترسی عمومی است. آن‌ها استدلال می‌کنند که تا پیش از این، ثبت تصاویر باکیفیت در شب یا ایجاد عمق میدان نیازمند تجهیزات گران‌قیمت و دانش فنی پیچیده بود. اکنون، هوش مصنوعی این قدرت را در جیب همه قرار داده است. برای این گروه، هدف نهایی دوربین ثبت دقیق فیزیک نور نیست، بلکه ثبت زیباترین و دلپذیرترین نسخه از یک خاطره است.

عکاسان سنتی و منتقدان

نگران از بین رفتن اصالت و واقع‌گرایی در تصاویر هستند.

بسیاری از عکاسان حرفه‌ای و منتقدان هنری نگاهی بدبینانه به این روند دارند. آن‌ها استدلال می‌کنند که پردازش بیش از حد، روح و اصالت لحظه را از بین می‌برد و به جای یک عکس واقعی، یک «رندر دیجیتال» بیش از حد بی‌نقص و مصنوعی تحویل می‌دهد. از دیدگاه آن‌ها، زمانی که الگوریتم‌ها تصمیم می‌گیرند چه چیزی را در تصویر نگه دارند، چه چیزی را حذف کنند و چه بافتی را از نو بسازند، نتیجه نهایی دیگر یک سند قابل اعتماد از واقعیت نیست، بلکه تفسیر یک ماشین از زیبایی‌شناسی است.

پرسش‌های متداول

چرا عکسی که می‌گیرم با آنچه قبل از فشردن شاتر در صفحه می‌بینم متفاوت است؟

زیرا پردازش‌های سنگین محاسباتی، ترکیب فریم‌ها و اعمال هوش مصنوعی تنها پس از فشردن دکمه شاتر روی تصویر نهایی اعمال می‌شوند و پیش‌نمایش زنده توان پردازش تمام این مراحل را در لحظه ندارد.

آیا مگاپیکسل بالاتر به معنای کیفیت بهتر عکس در گوشی‌هاست؟

خیر. در عکاسی محاسباتی، قدرت پردازنده سیگنال تصویر (ISP) و کیفیت الگوریتم‌های هوش مصنوعی بسیار مهم‌تر از تعداد مگاپیکسل‌های سنسور است.

آیا می‌توان عکاسی محاسباتی را در گوشی خاموش کرد؟

به طور کامل خیر، اما عکاسی در فرمت RAW (خام) در برخی گوشی‌ها به شما اجازه می‌دهد تا بخش زیادی از پردازش‌های خودکار هوش مصنوعی را دور بزنید.

آنچه نمی‌دانیم

  • آیا در آینده مرز بین عکس واقعی و تصویر تولید شده توسط هوش مصنوعی به طور کامل از بین خواهد رفت؟
  • قوانین کپی‌رایت چگونه با تصاویری که بخش عمده آن‌ها توسط الگوریتم‌ها ساخته شده‌اند برخورد خواهند کرد؟

چرا مهم است

درک نحوه کارکرد دوربین گوشی‌ها به ما کمک می‌کند تا بفهمیم چرا تصاویری که در شبکه‌های اجتماعی می‌بینیم همیشه بازتاب دقیقی از واقعیت فیزیکی نیستند و چگونه هوش مصنوعی در حال تغییر دادن مفهوم بنیادین «خاطره تصویری» است.

منابع

پوشش منابع

7 منبع

3 دیدگاه شناسایی‌شده

مهندسان نرم‌افزار و شرکت‌های فناوری 50%عکاسان سنتی و منتقدان 30%محققان و دانشگاهیان 20%
  1. [1]Android Centralمهندسان نرم‌افزار و شرکت‌های فناوری

    How computational photography works in smartphone cameras

    مطالعه در Android Central
  2. [2]PetaPixelعکاسان سنتی و منتقدان

    What is Computational Photography?

    مطالعه در PetaPixel
  3. [3]MITمحققان و دانشگاهیان

    What is Computational Photography?

    مطالعه در MIT
  4. [4]AppleInsiderمهندسان نرم‌افزار و شرکت‌های فناوری

    How Apple's Deep Fusion computational photography works

    مطالعه در AppleInsider
  5. [5]Mediumمهندسان نرم‌افزار و شرکت‌های فناوری

    Why Smartphones Win in Everyday Photography

    مطالعه در Medium
  6. [6]تیم سردبیری کوهستانمحققان و دانشگاهیان

    تحلیل تیم سردبیری کوهستان

    مطالعه در تیم سردبیری کوهستان
  7. [7]Wikipediaمحققان و دانشگاهیان

    Computational photography

    مطالعه در Wikipedia

نظرات

همیشه در جریان باشید

هر زاویه. هر روز.

دریافت فناوری اخبار همراه با پوشش کامل منابع و تحلیل دیدگاه‌ها، مستقیم در صندوق ورودی شما.