OpenAI приобрела разработчика ИИ-алгоритмов мобильной фотосъемки. Зачем?

OpenAI выкупила компанию Glass Imaging, которая разрабатывает ключевые технологии вычислительной фотографии для смартфонов. В частности, ее алгоритмы GlassAI Neural Image Signal Processing (ISP) использовались в камерофоне Honor 600 при съемке с большим приближением. А сама команда создавала первый портретный режим фотосъемки для iPhone. Главной задачей компания ставила преодолеть разрыв в качестве при съемке на смартфон и на профессиональную зеркальную камеру. Но зачем этот актив нужен OpenAI?

Компания Glass Imaging была создана в 2019 году в городе Лос-Альтос (Калифорния). Ее основатели Зив Аттар и Том Бишоп до этого руководили командой, разработавшей технологию портретного режима для iPhone 7 Plus.

Зив Аттар и Том Бишоп тестируют прототип технологии Glass Imaging в 2022 году

В результате: вычислительная фотография сумела победить несколько ключевых ограничений, которые имели камеры смартфонов прошлых поколений. Это и было целью создания Glass Imaging.

Современные камерофоны получили продвинутое шумоподавление, возможность цифрового кадрирования без потери качества (до разумных пределов, конечно же), высокий динамический диапазон, качественную цветопередачу и другие особенности. В обзоре Honor 600 Pro редакция Фотар наглядно демонстрировала все эти улучшения.

Разработчики алгоритмов обработки фотографий за последние годы проделали большую работу. И, конечно же, по этой причине интерес к Glass Imaging проявила OpenAI. По данным The Wall Street Journal сумма сделки составила 300 млн долларов.

Что именно разрабатывает Glass Imaging?

Предложенная Glass Imaging система работает с изображением на очень глубоком уровне. Для понимания: нейронный процессор обработки изображений GlassAI от Glass Imaging использует необработанное изображение на уровне сенсора. То есть, по сути, RAW-снимок.

Любопытным является и тот факт, что эта технология может работать с любым сенсором. Даже с матрицами современных полнокадровых камер. И, вероятно, однажды такая коллаборация произойдет. Редакция Photar.ru предполагает, что первой камерой, сочетающей в себе крупный сенсор, сменную оптику и продвинутые ИИ-вычисления станет фотоаппарат от Insta360.

Но все-таки Glass Imaging решила сосредоточиться на смартфонах, поскольку это крупнейший сегмент рынка.

Главной же фишкой обработки изображений GlassAI Neural ISP является то, что нейронный процессор работает совместно с данными на уровне сенсоров и реальным оптическим анализом. Еще десять лет назад ничего подобного в мире не было.

Что готовит OpenAI?

О сделке сообщило издание The Wall Street Journal со ссылкой на осведомленные источники. Ни компания OpenAI, ни сама Glass Imaging пока не комментировали это сообщение. Предположительно, подобный комментарий должен дать ответ на логичный вопрос «зачем?», на который OpenAI не хочет отвечать до момента своего полноценного дебюта на рынке носимых устройств.

Хотя, казалось бы, OpenAI занимается искусственным интеллектом, а не реальными фотографиями или видео. Но в ближайшее время все может измениться.

Ведь совсем скоро должен состояться анонс революционного устройства OpenAI, которое будет оснащено камерой. Или несколькими камерами. Дизайн не раскрывался, поэтому возможны совершенно разные варианты:

Впрочем, сообщалось, что это устройство было разработано совместно с главным дизайнером Apple Джонни Айвом. По задумке: оно дополнит перечень необходимых гаджетов наряду со смартфоном и ноутбуком, считают в компании.

Стартап Джони Айва — io Products компания OpenAI приобрела в прошлом году за 6.5 млрд долларов. Затем Apple обвинила разработчика ChatGPT в систематическом переманивании сотрудников с целью кражи секретных технологий.

«В этом деле речь идет о том, что бывшие сотрудники Apple украли коммерческие секреты компании в интересах OpenAI», — говорится в иске, поданном Apple.

Вся схема была придумана для того, чтобы OpenAI могла ускорить выпуск собственного потребительского оборудования, следует из поданного заявления. Джони Айв говорил, что уже придумал для OpenAI концепции 20-ти различных ИИ-устройств.

Бывший главный дизайнер Apple даже заявлял, что новые «умные умные устройства OpenAI» не будут ничем напоминать iPhone. Он выразил надежду, что новые типы устройств помогут сделать людей более счастливыми и менее беспокойными.

Пока OpenAI готовят свой революционный релиз — пока совершенно не ясно, что именно будет с компанией Glass Imaging.

Ранее Фотар сообщал о том, что OpenAI представили модель GPT-6 Astra, которая обучалась на мощностях центра Stargate в Техасе. Для этого задействовали более 100 тысяч графических процессоров, а контроль за обучением был возложен на предыдущие ИИ-модели OpenAI. В результате новый ИИ умеет напрямую управлять программами (например, может сделать 3D-модель в Blender), сама работать в DaVinci Resolve и Photoshop (двумя разными способами: самостоятельно или через официальный плагин), программировать на элитном уровне. Она способна удерживать фокус на многоэтапных творческих задачах часами и доводить их до конца. Именно из-за этого новая нейронка от OpenAI гораздо сложнее поддается внешнему контролю ведь ИИ может скрывать ход рассуждений.