Google оптимизировала алгоритмы обработки изображений людей всех рас

Google напомнила об одной исторически сложившейся проблеме, которая позволяла говорить о расовом неравенстве: многие технологии съёмки и последующей автоматической обработки изображений работали неодинаково со снимками людей разных рас. С выходом смартфонов серии Pixel 6 компания попыталась решить эту проблему.

Источник: blog.google

Если алгоритмы обработки изображений не тестируются с участием представителей разных рас, то они могут не срабатывать должным образом, чрезмерно осветляя изображения людей или неестественно обесцвечивая их кожу. Чтобы исправить ситуацию, компания решила не ограничиваться только собственной командой и привлекла к работе известных специалистов с богатым опытом в съёмке людей разных рас и последующей обработке их снимков. При участии этих специалистов Google значительно увеличила число снимков в базе для обучения искусственного интеллекта в приложении камеры. Набор оптимизированных алгоритмов распознавания лиц, съёмки и редактирования изображений получил название Real Tone.

Компания перечислила ключевые изменения, которые получили смартфоны Pixel 6 для съёмки и оптимизации изображения представителей разных рас.

• В цифровой фотографии получение качественного портрета зависит от способности камеры определять лицо. Для улучшения работы этой функции в исходном наборе изображений было повышено разнообразие лиц и условий освещения.
• Сторонние консультанты помогли разработчикам принять более правильные решения в передаче нюансов цвета кожи представителей разных рас. В результате улучшилась работа алгоритма автоматической корректировки баланса белого.
• Оптимизированы алгоритмы выставления автоматической экспозиции. Эксперты помогли инженерам компании установить настройки камеры таким образом, чтобы она показала человека любой расы таким, какой он есть — без неестественного увеличения или уменьшения яркости.
• Проблемой прежних алгоритмов была неестественная передача цвета кожи в условиях рассеянного освещения. Новый алгоритм уменьшает влияние этого эффекта на конечный результат.
• Ещё одной сложностью была возникающая при определённых условиях размытость изображений людей с тёмным цветом кожи. Google задействовала новые возможности чипа Tensor, чтобы сделать снимки более резкими за счёт контроля движения даже в условиях низкой освещённости.

Источник: store.google.com

Первыми отзывы на оптимизированные алгоритмы обработки изображения предоставили собственные сотрудники Google. Они высоко оценили передачу тонов цвета кожи, яркость, глубину и детализацию снимков, назвав Pixel 6 лучшим для съёмки представителей разных рас — даже когда их опрашивали, не уточняя модели телефона, а предлагая только снимки.

В сотрудничестве с экспертами компания оптимизировала не только алгоритмы работы камер в новых смартфонах, но и скорректировала работу существующих программных продуктов. Обновилась функция автоматического улучшения снимков в Google Photos — в ближайшие недели она будет доступна в приложении под Android и iOS. Кроме того, недавно была добавлена автоматическая регулировка освещения в видеосвязи Google Meet.

Источник:

• blog.google