Нейросеть NVIDIA научили восстанавливать фотографии

Восстановление фотографий – сложный и трудоемкий процесс, который, в случае со старыми снимками, приходится проводить вручную чуть ли не попиксельно. Но команда инженеров NVIDIA показала нейросеть, способную как дорисовать утраченную деталь, так и убрать «лишнее» вроде водяных знаков. Данная технология пока не имеет аналогов.

Конкуренты NVIDIA из Adobe тоже показывали подобную функцию, но у них она действует иначе. В Photoshop используется искусственный интеллект, который в ходе обработки изображения «заимствует» контекстное отображение у соседних пикселей, а затем достраивает картину в соответствии с этим. Вот только отсутствующий фрагмент может выглядеть неестественно. Допустим, по краям он будет зеленым, а в центре – фиолетовым. А система от Adobe зальет все зеленым, поскольку видит только край объекта.

Алгоритм нейросети анализирует контекст не отдельной области, а всей картины в целом. Таким образом он определяет закономерности и взаимосвязь между объектами. После распознавания объекта нейросеть «предполагает», что могло находиться в отсутствующих местах. А далее дорисовывается нужный фрагмент так, чтобы результат максимально вписался не только в цветовую гамму, но и в контекст оригинальной картины.

Когда технология будет полностью отработана, то восстановление фотографий будет занимать несколько минут.