Google оптимизировала алгоритмы обработки изображений людей всех рас

Google напомнила об одной исторически сложившейся проблеме, которая позволяла говорить о расовом неравенстве: многие технологии съёмки и последующей автоматической обработки изображений работали неодинаково со снимками людей разных рас. С выходом смартфонов серии Pixel 6 компания попыталась решить эту проблему.

Источник: blog.google

Если алгоритмы обработки изображений не тестируются с участием представителей разных рас, то они могут не срабатывать должным образом, чрезмерно осветляя изображения людей или неестественно обесцвечивая их кожу. Чтобы исправить ситуацию, компания решила не ограничиваться только собственной командой и привлекла к работе известных специалистов с богатым опытом в съёмке людей разных рас и последующей обработке их снимков. При участии этих специалистов Google значительно увеличила число снимков в базе для обучения искусственного интеллекта в приложении камеры. Набор оптимизированных алгоритмов распознавания лиц, съёмки и редактирования изображений получил название Real Tone.

Компания перечислила ключевые изменения, которые получили смартфоны Pixel 6 для съёмки и оптимизации изображения представителей разных рас.

В цифровой фотографии получение качественного портрета зависит от способности камеры определять лицо. Для улучшения работы этой функции в исходном наборе изображений было повышено разнообразие лиц и условий освещения.
Сторонние консультанты помогли разработчикам принять более правильные решения в передаче нюансов цвета кожи представителей разных рас. В результате улучшилась работа алгоритма автоматической корректировки баланса белого.
Оптимизированы алгоритмы выставления автоматической экспозиции. Эксперты помогли инженерам компании установить настройки камеры таким образом, чтобы она показала человека любой расы таким, какой он есть — без неестественного увеличения или уменьшения яркости.
Проблемой прежних алгоритмов была неестественная передача цвета кожи в условиях рассеянного освещения. Новый алгоритм уменьшает влияние этого эффекта на конечный результат.
Ещё одной сложностью была возникающая при определённых условиях размытость изображений людей с тёмным цветом кожи. Google задействовала новые возможности чипа Tensor, чтобы сделать снимки более резкими за счёт контроля движения даже в условиях низкой освещённости.

Источник: store.google.com

Первыми отзывы на оптимизированные алгоритмы обработки изображения предоставили собственные сотрудники Google. Они высоко оценили передачу тонов цвета кожи, яркость, глубину и детализацию снимков, назвав Pixel 6 лучшим для съёмки представителей разных рас — даже когда их опрашивали, не уточняя модели телефона, а предлагая только снимки.

В сотрудничестве с экспертами компания оптимизировала не только алгоритмы работы камер в новых смартфонах, но и скорректировала работу существующих программных продуктов. Обновилась функция автоматического улучшения снимков в Google Photos — в ближайшие недели она будет доступна в приложении под Android и iOS. Кроме того, недавно была добавлена автоматическая регулировка освещения в видеосвязи Google Meet.

Источник: