Замена лиц людей и HDR+ режим, превосходящий iPhone 15 Pro Max — подробнее об ИИ-функциях камер Google Pixel 8 и Pixel 8 Pro

Немалую часть своей вчерашней презентации компания Google уделила возможностям камер и функциям Google Photos, которые доступны в новых смартфонов Pixel 8 и Pixel 8 Pro. Остановимся вкратце на основных моментах.

Камеры Pixel 8 и Pixel 8 Pro

Оба смартфона получили одинаковый главный 50-мегапиксельный модуль, который обладает на 21% лучшей светочувствительностью, чем в прошлогодней серии Pixel 7. Это должно улучшить съемку в условиях слабой освещенности. Также сообщается о более быстрой работе автофокуса в таких условиях. Обновленная сверхширокоугольная камера Pixel 8 теперь имеет автофокус и поддерживает Macro Focus.

В Pixel 8 Pro обновлены все камеры. Так, фронтальная камера получила автофокус. В то же время 48-мегапиксельная сверхширокоугольная камера захватывает на 105% больше света и фокусируется на 30% ближе в режиме Macro Focus. Также улучшена работа телефото модуля в условиях слабой освещенности.

Dual Exposure

Технология Dual Exposure в основной камере Pixel 8 и Pixel 8 Pro делает видео более четким и менее зернистым в сценах со сложным освещением, например, на фоне заката. Dual Exposure позволяет снимать два изображения одновременно. Одно из них оптимизировано для условий низкой освещенности, а другое — для расширенного динамического диапазона. В результате получается естественное видео с яркими цветами и низким уровнем шума.

Real Tone

Улучшенная функция Real Tone точно передает широкий диапазон оттенков человеческой кожи, особенно более темных. Чтобы достичь этого, вспышку дополнили технологией Night Sight. И теперь более темная кожа выглядит естественно даже на фотографиях со вспышкой.

Video Boost и Night Sight

Алгоритмы вычислительной фотографии HDR+ теперь используются для вычислительного видео. Это довольно сложная задача, требующая многих ресурсов. Фактически, обработка одноминутного видео 4K/30р — это то же самое, что обработка 1800 фотографий. Для решения этой задачи инженеры объединили усилия чипа Tensor G3 и мощность центров обработки данных.

Фактически при использовании Video Boost на Pixel 8 Pro пользователь сначала получает видео на смартфоне, затем оно загружается в облако, и на серверах к видео применяются модели вычислительной фотографии. Этот процесс также впервые делает возможным использования Night Sight Video на Pixel, обеспечивая качественные ролики в условиях низкой освещенности. Обе функции появятся позже в этом году.

Pro Controls на Pixel 8 Pro

Элементы управления Pro Controls обеспечивают еще больший контроль над настройками камеры на Pixel 8 Pro, открывая дополнительные возможности творчества. Помимо управления балансом белого, экспозицией и яркостью теней, теперь можно вручную настраивать фокус, выдержку и ISO. И новые настройки Pro позволяют делать фотографии с разрешением 50 Мп во всем диапазоне масштабирования. При использовании Pro Controls все возможности вычислительной фотографии Pixel HDR+ по-прежнему будут активны.

Guided Frame

Функция Guided Frame использует комбинацию звуковых сигналов, высококонтрастной анимации и тактильной обратной связи, чтобы помочь слепым и слабовидящим людям делать фотографии. Эта функция теперь работает как на фронтальной, так и на задней камерах. Она распознает не только лица, а также позволяет сделать снимок со своей собакой или ужином.

Best Take

Новая функция Google Photos для улучшения групповых снимков. Зачастую на групповых фотографиях кто-то смотрит не на камеру, не вовремя моргнул и имеет неподходящее выражение лица. Это особенно актуально при съемке детей. Best Take использует серию похожих фотографий, чтобы автоматически создать смешанное изображение, в котором будут показаны лучшие выражения каждого человека. Также можно вручную выбрать выражение или другой образ, чтобы получить желаемое групповое фото.

Magic Editor

Это инструмент на базе генеративного ИИ, который позволяет легко вносить сложные изменения в фотографии, которые иначе требовали бы использования графического редактора. Например, можно просто изменить размер или положение объекта, улучшить освещение и фон, убрать лишние объекты на снимке. Magic Editor предложит на выбор несколько вариантов результата, чтобы пользователь мог выбрать оптимальный вид. В дальнейшем в Magic Editor планируется добавить новые функции.

Audio Magic Eraser

Подобно нежелательным объектам на фотографиях, лишние фоновые шумы в видео отвлекают внимание от главного сюжета. Используя модели машинного обучения, Audio Magic Eraser может распознавать звуки — например, разговоры людей на заднем плане, музыку или ветер — и сортировать их по отдельным слоям, которыми пользователь может управлять. Затем всего за несколько нажатий можно уменьшить отвлекающие шумы, чтобы видео звучало наилучшим образом.

Zoom Enhance

Благодаря функции Zoom Enhance можно увеличить любую фотографию постфактум и кадрировать ее нужным образом. Используя генеративный искусственный интеллект, Zoom Enhance заполняет промежутки между пикселями и прогнозирует мелкие детали. Это открывает больше возможностей при кадрировании и добавляет гибкости для фокусировки на наиболее важной части фотографии. Zoom Enhance появится в скором времени на Pixel 8 Pro.

Источник: Google