Искусственный интеллект становится всё более распространённым в фотоиндустрии. От программного обеспечения на основе ИИ до продвинутой автофокусировки.
ИИ активно внедряется в новейшие смартфоны, чтобы помочь получить максимальную отдачу от относительно небольших сенсоров и объективов.
Специалисты Android Authority поговорили с вице-президентом компании Qualcomm по управлению продуктами — Джаддом Хейпом, и у него нашлось много интересного на тему ИИ, включая заявление о том, что эта технология когда-нибудь поможет смартфонам превзойти по качеству профессиональные фотокамеры.
Хейп рассказал о том, как ИИ используется в камерах в настоящее время: машинное обучение помогло улучшить шумоподавление, удалять лишние объекты при редактировании, уменьшить дрожание видео и многое другое. Технологии искусственного интеллекта используются для различных задач обнаружения сцен и могут помочь смартфону отличить объект от фона, различить кожу и волосы и многое другое. На основе восприятия смартфоном отдельных частей изображения он может применять тонкую коррекцию обработки изображения.
Хейпе считает, что существует четыре этапа развития ИИ в фотографии.
Первый этап — базовое распознавание сцены, например, определение конкретного объекта в кадре. На втором этапе ИИ управляет такими функциями, как автофокус, автоматический баланс белого и автоматическая экспозиция.
Руководитель Qualcomm считает, что современные технологии искусственного интеллекта в смартфонах сейчас находятся на третьем этапе, который представляет собой расширенное распознавание сегментов. Это не просто умение видеть конкретный объект в кадре, а способность определять почти всё в сцене и настраивать их соответствующим образом. Теперь телефоны могут определять, не искривлён ли горизонт, не требуется ли корректировка экспозиции для конкретного объекта на фотографии. Этот этап ИИ также включает в себя передовые технологии автофокусировки/автоэкспозиции, такие, как распознавание лиц и глаз.
Четвёртый этап, до которого, по мнению Хейпа, отрасли осталось около трёх-пяти лет, — это когда ИИ будет обрабатывать всё изображение.
Хейп говорит: «Представьте себе мир будущего, где вы говорите: «Я хочу, чтобы фотография выглядела как снимок National Geographic», а механизм ИИ отвечает: «Хорошо, я настрою цвета, текстуру, баланс белого и всё остальное, чтобы изображение выглядело и ощущалось как-то, которое вы мне только что показали».
Ранее в этом году президент и генеральный директор Sony Semiconductor Solutions Теруши Шимизу отметил, что благодаря инновациям в области смартфонов мобильные камеры могут превзойти зеркальные и беззеркальные камеры уже в 2024 году. Хейпе согласен с этим утверждением, хотя стоит отметить, что для смартфонов всё ещё существуют физические ограничения.
Не только датчики изображения значительно меньше, но и оптические компоненты в объективах. Тем не менее Хейп считает, что вычислительная мощность смартфонов, которая более производительна, чем в современных камерах, может помочь преодолеть разрыв и преодолеть физические проблемы, связанные с меньшими датчиками и объективами. Верно и то, что некоторые крупные игроки на рынке смартфонов направляют значительные средства и инженерные мощности на разработку смартфонов. Хотя специализированные камеры становятся все более совершенными, разница в размерах рынка между смартфонами и камерами со сменными объективами огромна.
По-прежнему существует значительная разница в потенциальном качестве изображения между смартфонами и специализированными камерами с большими матрицами, такими как Micro Four Thirds, APS-C, полнокадровыми и среднеформатными камерами.
Несмотря на то, что некоторые смартфоны предлагают снимки с разрешением более 100 мегапикселей, что намного больше, чем у любой полнокадровой камеры на рынке, качество пикселей разное. Качество объектива также значительно отличается. Смартфон с разрешением 108-мегапикселей не даёт более резкого изображения, чем среднеформатная камера с разрешением 100 Мп или любая современная кропнутая камера, если на то пошло.
В смартфоне может быть больше пикселей, но сами пиксели намного меньше. ИИ может помочь компенсировать физические ограничения, но пока что ИИ не смог преодолеть эти ограничения полностью.
Следующим большим рубежом в фотографии на смартфонах может стать сочетание технологии искусственного интеллекта и изменённого дизайна объектива.
Можно использовать анаморфотные линзы, а затем перестраивать изображение в надлежащий вид с помощью точно настроенных алгоритмов. Хотя это ещё не было реализовано в коммерчески доступных продуктах, идея установки большего и лучшего стекла на меньшей площади является заманчивой. На рынке смартфонов также есть много возможностей для развития оптических технологий, особенно по мере повышения вычислительной мощности.
Кроме того, мы видели, как компания Sony внедрила настоящий переменный оптический зум в свои смартфоны Xperia. Вполне возможно, что другие компании разрабатывают аналогичные, а может быть, даже лучшие конструкции с переменным зуммом, что позволит улучшить общее удобство использования смартфонов для более широкого круга задач.
Есть много поводов для радости. Однако оптимизм Хейпа в отношении того, что смартфоны смогут превзойти современные «большие» камеры по качеству изображения, всё ещё выглядит слишком обнадёживающим.
Несомненно, усовершенствования в программном и аппаратном обеспечении, а также технологии искусственного интеллекта помогли смартфонам добиться значительных успехов в фото- и видеосъёмке. Также верно, что изображения со смартфона достаточно для многих пользователей. Однако чтобы преодолеть физику и свести на нет преимущества от больших датчиков, больших пикселей и чрезвычайно продвинутых объективов, потребуется гораздо больше, чем простое усовершенствование процессора и более сложная обработка изображений посредством ИИ.
Также напомню, что Sony повторно выпустили прошивку 1.1 для камеры Sony A7 IV.
Следите за новостями в наших социальных сетях: ВКонтакте, Дзен, Telegram и YouTube
