ИИ позволяет реалистично восстанавливать изображения
Ранее подобная техника позволяла увеличить разрешение фотографии лица в восемь раз, по сравнению с оригиналом. Новая программа делает это с 64 кратным разрешением, при этом она не восстанавливает плохую картинку, а создает фактически новое лицо, но очень близкое к настоящему.
Новый метод называется PULSE. Система просматривает сгенерированные ИИ изображения лиц в высоком разрешении, уменьшает их до разрешения фотографии, которую нужно улучшить и затем отбирает среди них наиболее похожие на искомое изображение. На этой основе генерируется новое лицо.
В системе использованы две нейронные сети, которые обучены на одной и той же базе фотографий. При этом в машинном обучении применен состязательный подход. Одна из сетей создает искусственное лицо, а другая решает насколько оно реалистично.
PULSE может преобразовать снимок, разрешением в 16×16 пикселей, в изображение разрешением в 1024×1024, причем с очень высокой детализацией. По словам руководителя исследовательской команды Синтии Рудин, новый метод позволяет получить очень реалистическую картинку даже из очень некачественного изображения.
Этот подход, как считает один из соавторов исследования Сачит Менон, может использоваться в разных областях — от медицины до астрономии.
