Анализируя этапы развития смартфонов, можно утверждать, что производители смартфонов медленно, но верно смещали свое внимание от безрамочных дисплеев к AI (Artificial Intelligence – Искусственный интеллект). Сегодня все поставщики заявляют о поддержке AI в своих устройствах, и среди множества различных функций AI именно AI-фотография может считаться самой «горячей» темой.
Все началось с Sharp J-SH04. Выпущенное в 2000 году и уже совершеннолетнее устройство поставлялось с сенсором CMOS на 110 000 пикселей. С точки зрения фотографии, он оставлял желать лучшего, но зато, без сомнения, изменил отрасль настольно сильно, что влияние этого первопроходца ощущается и сегодня.
С тех пор, как первый телефон с камерой появился на рынке, каждая новая модель встроенной камеры становилась все лучше, направление развивалось экспоненциальными темпами. И вот мы уже преодолели эпохи телефонов с камерами и смартфонов, попав в эру AI-фотографии.
Во времена телефонов с дополнительными функциями Nokia, пожалуй, была одним из самых представительных брендов. В 2007 году телефон Nokia N95 под управлением Symbian OS ознаменовал «золотой век» производителя. Это знаковое устройство поставлялось с камерой с разрешением 5MP и автоматической фокусировкой, превосходя возможности оригинального iPhone.
Но, к сожалению для Nokia, ее доминирующие позиции на рынке были не долгосрочными. Всего через три года в 2010 Apple выпустила iPhone 4. Это устройство комплектовалось революционным сенсором с разрешением 5MP, который обеспечивал намного более широкие возможности для фотографии по сравнению с предшествовавшими решениями. Таким образом был сформирован интерес пользователей к фронтальным камерам. Примерно в это же время китайские производители стали искать свое место на рынке смартфонов. Инновационные восточные компании сфокусировались на том, чтобы создавать более крупные и мощные камеры, создав целую серию отраслевых прорывов — взять хотя бы камеру Huawei с тройным объективом.
С наступлением эры AI-фотографии производители телефонов стали стремиться первыми внедрить новые возможности искусственного интеллекта в свои камеры, чтобы стать новаторами в этом направлении. Учитывая признание и лояльность покупателей к тем, кто первым представляет что-то новое, не удивительно, что самые производители бросились внедрять инновации. Чтобы разобраться в сегодняшних реалиях, мы разделили производителей на три группы специалистов в области — Чипсетов, Камер и Алгоритмов.
Чипсеты
В связи с потребностью в большом количестве вычислений, необходимых для работы искусственного интеллекта, отдельный мощный AI-процессор может значительно улучшить производительность интеллектуальных систем. Дискретный процессор помогает воплотить новые функции AI-фотографии в телефонах, а также ускорить любые процессы, связанные с созданием снимков и записей. В дополнение к этому процессор может улучшать свои характеристики за счет непрекращающегося обучения. Чипы Apple A11 Bionic и Huawei Kirin 970 оба представляют собой AI-процессоры, но Kirin 970 выделяется за счет наличия выделенного NPU, который предназначен для обработки изображений. Именно благодаря этому достигается более высокая эффективность последнего.
Камеры
В этой группе самой представительной моделью можно считать Google Pixel 2. Это устройство совмещает облачные вычисления и алгоритмы для групповой обработки AI-фотографий и видео записей. Секрет Pixel 2 кроется в самих алгоритмах и модуле обработки изображений, встроенном непосредственно в камеру, что позволяет ему компенсировать ограничения съемки движущихся объектов, размытых кадров и получения другой глубокой информации. И хотя все это очень хорошо выглядит на бумаге, в реальности такая конфигурация оказывается «палкой о двух концах»: получая преимущества от невероятных вычислительных возможностей из облака, она приводит к проблемам безопасности, потому что данные приходится постоянно передавать через Интернет, вместо того чтобы обрабатывать их локально. В дополнение к этому, решение требует постоянного подключения к Интернету, и, как следствие, не может гарантировать наличие постоянного пользовательского опыта.
Алгоритмы
В эту категорию попадают китайские производители телефонов, такие как Oppo и Vivo. Они обычно полагаются на увеличение производительности CPU и GPU, чтобы удовлетворить требования AI. Как правило, они встраивают AI в те сферы, которые максимально будут заметны пользователям. Однако, в конечном счете, небольшие ухищрения никогда не смогут сравниться с результатами полноценной проработки. Поэтому данный подход проигрывает в сравнении с использованием дискретного модуля NPU, созданного специально для AI-вычислений.
По всем этим причинам мы все еще не видим значительного количества AI-возможностей в моделях многих китайских производителей смартфонов. Может ли обычный SoC взять на себя AI-вычисления, необходимые для определения характеристик сцен? Возможно, Qualcomm Snapdragon 845 обладает достаточной вычислительной мощностью, но что насчет 600 серии? Согласно маркетинговым материалам OPPO R15, это устройство может распознавать до 120 сцен, классифицируя их по 16 категориям. Однако получив это устройство для ознакомления, мы не увидели таких возможностей в его работе. С другой стороны, распознавание сцен на базе AI в смартфоне HUAWEI P20 Pro (большой обзор смартфона HUAWEI P20 Pro) показало заметные эффекты, дополняя уже отмеченные выше преимущества технологий этой модели. И поскольку конкуренция только стимулирует эволюцию, мы надеемся, что такое сравнение вдохновит производителей улучшать свои решения, создавая более совершенные устройства для конечных пользователей.
Новые смартфоны из серии HUAWEI nova укомплектованы флагманским SoC компании с функциями AI-распознавания сцен, которые превосходят возможности премиальных устройств, доступных на рынке и при этом предлагаются по более доступным ценам.
Кроме нового SoC, устройства nova также комплектуются улучшенными четырьмя камерами, причем фронтальная система состоит из пары 24MP+2MP. Если подобное решение оправдает свои характеристики, то новые nova могут оказаться куда привлекательнее для потребителей, чем целый набор премиальных смартфонов, которые будут продаваться по более высоким ценам. Также смартфоны nova поддерживают распознавание сцен для фронтальных камер — то есть впервые в отрасли пользователи могут снимать сэлфи, на которых выглядит хорошо не только их лицо, но и тот фон, на котором они фотографируются. Задние камеры Huawei nova представлены парой 24MP+16MP, что позволяет устройствам nova показывать результаты, сравнимые с флагманскими смартфонами.
Мы живем во времена, когда технологии AI используются все более повсеместно. Конечно, только рынок может решить, какой производитель придумал лучшее применение своим AI-технологиям.
На главном фото Ай Вэйвэй. Фотограф Alfred Weidinger
