Вы представляете, как преобразится процесс фотосъёмки, если ретушь будет выполняться до того, как кадр сделан. Исследователи Google и MIT в настоящее время работают над этим.
MIT News сообщает, что на этой неделе на конференции Siggraph digital graphics conference учёные Google и MIT будут хвастаться новой системой, которая может автоматически ретушировать фотографии аналогично профессиональным фотографам в режиме реального времени.
Такие приложения как Instagram могут показывать в реальном времени как будет выглядеть сцена с тем или иным фильтром. Новая система искусственного интеллекта может показывать обработанную версию любой сцены по мере кадрирования.
«Производительность является важной задачей в мобильной обработке изображений,» пишет исследователь MIT Майкл Гарби. «Наш алгоритм обрабатывает изображения с высоким разрешением на смартфоне за миллисекунды и обеспечивает просмотр в режиме реального времени с разрешением 1080p».
Система обучена на обширной библиотеке пар фотографий (одна фотография в формате RAW, а вторая — отредактированный снимок). Исследователи использовали 5000 фотографий. После того, как система была обучена, она смогла работать в автономном режиме, используя то, что она узнала. AI может ретушировать изображения в режиме реального времени из-за того, что он делает большую часть обработки изображения на версии с низким разрешением. После того, как изменения были сделаны и проанализированы, формула применяется к фото высокого разрешения.
«Эта технология имеет потенциал в сфере улучшения качества изображения в режиме реального времени на мобильных платформах», говорит исследователь Google Джон Баррон. «Использование машины для обучения обработке фотографий является захватывающей перспективой, но сейчас всё ограничивается мощностью мобильных телефонов».
