Команда лаборатории X рассказала о программных наработках Google Glass в области камеры. Спустя несколько лет инженеры использовали их при создании Google Pixel и Google Pixel XL — смартфонов с лучшими мобильными камерами по мнению IT-журналистов, техноблогеров и простых людей.
Несмотря на компактность, очки Google Glass снимали достойные по тем временам 5-мегапиксельные фотографии. Сотрудники лаборатории X вспоминают, что найти в 2011 году маленький и качественный модуль было почти невозможно. Инженеры попытались создать собственный, но постоянно сталкивались с трудностями: низким качеством съемки в темноте, ограниченным динамическим диапазоном, недостаточной мощностью процессора в «умных» очках.
Сотрудник лаборатории Марк Ливой подошел к решению с другого конца. Вместо маленького, но хорошо снимающего модуля он предложил набор алгоритмов, который позже объединили в проект Gcam. Позже разработчики создали технологию Image Fusion для съемки и объединения нескольких снимков в один. Благодаря алгоритму камера Google Glass делала яркие и контрастные снимки. Смотрите.
Google оценила потенциал Image Fusion и развила его до HDR+ — эксклюзивного режима камеры в смартфонах Nexus и Pixel. Последние получили самую продвинутую версию: сразу после запуска камеры смартфон снимает от 15 до 30 кадров в секунду, которые хранятся в памяти, пока владелец не спустит виртуальный затвор. После чего алгоритм выбирает лучшие снимки и склеивает их в один.
Обратите внимание на смешанное освещение:
Сейчас Gcam вместе с YouTube, Google Photos и Jump. входят в проект Google Research. Инженеры планируют подружить ПО с машинным обучением для лучшего определения баланса белого, управления боке и светом на фоне.
Источник