پژوهشگران اپل هوش مصنوعی جدیدی توسعه دادهاند که کیفیت عکسهای بسیار تاریک را بهطرز چشمگیری بهبود میبخشد. این سیستم با ادغام مدل تصویر مبتنیبر دیفیوژن در فرایند پردازش دوربین، قادر است جزئیاتی را از دادههای خام حسگر بازیابی کند که در حالت عادی از دست میرفتند.
احتمالاً برای شما هم پیش آمده که در محیطی بسیار کمنور عکاسی کنید و با تصویری پر از نویزهای دیجیتال و دانهدانه مواجه شوید. این اتفاق زمانی رخ میدهد که حسگر تصویر نور کافی دریافت نمیکند.
شرکتهایی مانند اپل برای جبران این نقص، از الگوریتمهای پردازش تصویر استفاده میکنند؛ الگوریتمهایی که بهدلیل ایجاد جلوههای بیشازحد صاف و شبیه نقاشی رنگروغن (که در آن جزئیات ظریف محو یا به چیزی نامفهوم تبدیل میشوند) مورد انتقاد قرار گرفتهاند.
پژوهشگران اپل و دانشگاه پردو برای حل این چالش، مدلی به نام DarkDiff را توسعه دادهاند. آنها در مقالهای با عنوان «DarkDiff: پیشبرد بهبود تصاویر خام در نور کم با تغییر کاربری مدلهای دیفیوژن برای ISP دوربین»، دستاورد خود را معرفی کردند.
بهبیان ساده، آنها بهجای اعمال هوش مصنوعی در مرحلهی پسپردازش، مدل «استیبل دیفیوژن» را که روی میلیونها تصویر آموزش دیده، بازتعریف کردهاند. این مدل درک میکند که با توجه به کلیت تصویر، چه جزئیاتی باید در نواحی تاریک وجود داشته باشد و سپس با پردازش سیگنال تصویر (ISP) ادغام میشود.
رویکرد آنها مکانیزمی را معرفی میکند که پردازش را روی اجزای تصویر متمرکز میکند؛ کاری که به حفظ ساختارهای محلی عکس کمک میکند و از ایجاد توهمات تصویری (تغییر کلی محتوا با هوش مصنوعی) جلوگیری میکند.
با این روش، ISP دوربین همچنان پردازشهای اولیهی ضروری روی دادههای خام حسگر (مانند تعادل سفیدی و دیموزاییککردن) را انجام میدهد. سپس DarkDiff روی این تصویر RGB خطی عمل میکند، نویز را حذف میکند و مستقیماً تصویر نهایی sRGB را خروجی میدهد.
DarkDiff همچنین از تکنیک استاندارد دیفیوژن به نام «هدایت بدون طبقهبندی» بهره میبرد که تعیین میکند مدل تا چه حد باید به تصویر ورودی وفادار بماند و چقدر از دانستههای قبلی خود استفاده کند.
با کاهش سطح هدایت، مدل الگوهای صافتری تولید میکند؛ اما افزایش هدایت باعث ایجاد بافتهای تیزتر و جزئیات دقیقتر میشود (که البته ریسک ایجاد مصنوعات ناخواسته یا محتوای خیالی را هم بالا میبرد).
محققان برای آزمایش DarkDiff، از عکسهای واقعی گرفتهشده در نور بسیار کم با دوربینهایی مثل سونی A۷SII استفاده کردند و نتایج را با سایر مدلهای بهبود تصویر خام و مدلهای مبتنیبر دیفیوژن (از جمله ExposureDiffusion) مقایسه کردند
تصاویر آزمایشی در شب و با نوردهی بسیار کوتاه (۰٫۰۳۳ ثانیه) ثبت شدند و نسخههای بهبودیافتهی DarkDiff با عکسهای مرجع که با نوردهی ۳۰۰ برابر طولانیتر روی سهپایه گرفته شده بودند، مقایسه شدند.
پژوهشگران خاطرنشان کردند که پردازش مبتنیبر هوش مصنوعی آنها بهمراتب کندتر از روشهای سنتی است و احتمالاً به پردازش ابری نیاز دارد؛ چون اجرای محلی آن روی گوشی باتری را بهسرعت تخلیه میکند. همچنین محدودیتهایی در تشخیص متنهای غیرانگلیسی در صحنههای کمنور وجود دارد.
گزارش تازه نشان میدهد کمپانی اپل برای گوشی مورد انتظار آیفون تاشو بهدنبال نمایشگری بدون چین و چروک است، هدفی که هنوز رقبا به آن نرسیدهاند.
اپل بهصورت بیسروصدا مشغول توسعه آیفون تاشوی خود است. در ماههای اخیر، افشاگریهای متعددی درباره مشخصات این دستگاه منتشر شده و حالا اطلاعات تازهای از سوی دیجیتال چت استیشن جزئیات بیشتری از این پروژه را روشن میکند.
بر اساس این گزارش، هدف اصلی اپل در طراحی نمایشگر تاشوی خود، رسیدن به ظاهری بدون چین قابل مشاهده است. افرادی که تجربه استفاده از گوشیهای تاشوی اندرویدی را دارند، بهخوبی میدانند چرا این موضوع اهمیت زیادی دارد.
با وجود گذشت چند نسل از گوشیهای تاشو، مدلهایی مانند سری گلکسی زد فولد سامسونگ و دیگر گوشیهای تاشوی اندرویدی همچنان یک خط چین مشخص در مرکز نمایشگر دارند. هرچند کاربران بعد از مدتی کمتر به آن توجه میکنند، اما این چین همچنان وجود دارد و در شرایط نوری خاص کاملا قابل مشاهده است.
طبق این افشاگری، اپل در استفاده از شیشه انعطافپذیر فوق نازک پیشرفتهایی داشته، اما هنوز با چالشهای فنی روبهرو است.
گفته میشود این شرکت در حال آزمایش شیشههای فوق نازک انعطافپذیر با ضخامتهای مختلف است. این لایه شیشهای روی نمایشگر تاشو قرار میگیرد و نقش مهمی در میزان دیدهشدن چین نمایشگر در طول زمان دارد.
انتظار نمیرود آیفون تاشو پیش از سپتامبر سال آینده معرفی شود و این موضوع زمان بیشتری در اختیار اپل و تامینکنندگانش قرار میدهد تا مشکلات فنی باقیمانده را برطرف کنند.
جالب اینکه دیجیتال چت استیشن اشاره میکند ۲ تولیدکننده چینی دیگر نیز در حال آزمایش راهکارهای مشابه با استفاده از شیشه انعطافپذیر فوق نازک و طراحیهای تاشوی عریض هستند.
در صورت حل مشکلات زنجیره تامین، ممکن است چندین گوشی تاشو با تمرکز بر حذف چین نمایشگر تقریبا همزمان وارد بازار شوند و بهطور مستقیم با محصول اپل رقابت کنند.
بسیاری از گوشیهای تاشوی فعلی از لایههای پلیمری یا طراحی خاص لولا استفاده میکنند که اگرچه میزان چین را کاهش میدهد، اما در نور خاص یا هنگام نمایش رنگهای یکدست، خط چین همچنان قابل تشخیص است.
شیشه انعطافپذیر فوق نازک میتواند ظاهر بسیار تمیزتری ایجاد کند، اما از نظر فنی بسیار پیچیده است. این شیشه باید بارها خم شود بدون اینکه ترک بخورد، در حالی که لایههای نمایشگر و مکانیزم لولا نیز باید حرکت مداوم را بدون ایجاد برآمدگی مدیریت کنند.
بدون تردید، دیدن نتیجه نهایی تلاشهای اپل در آیفون تاشوی آینده میتواند بسیار جذاب و تعیینکننده باشد.
