Группа исследователей искусственного интеллекта Facebook совместно с американскими и тайваньскими учёными разработала новый метод создания 3D-фотографий. Подобные алгоритмы для придания изображениям объёмного вида уже существуют, но выдаваемые ими результаты портятся артефактами в виде размытия и других искажений. Основанная на машинном обучении технология устраняет практически все эти минусы.

Новая нейронная сеть способна придавать объем двум видам изображений. Во-первых, она поддерживает фотографии формата RGB-D, которые можно снять при помощи двойной камеры iPhone, контроллера Kinect и других устройств с возможностью определения глубины сцены. Во-вторых, она может работать и с обычными 2D-изображениями — главное, предварительно задать параметры глубины.

Способности нейросети были продемонстрированы на примере случайно отобранных фотографий из набора RealEstate10K. Для демонстрации качества обработки 2D-фотографий, были взяты исторические кадры XX века.

Благодаря внедрению технологии Inpainting, разработчики смогли удалить артефакты, которые возникали при создании трёхмерных изображений другими методами. В ходе этого процесса искусственный интеллект обнаруживает недостающие пиксели и воссоздаёт их — как результат, на объёмных фотографиях нет размытия и искажений.

Подробнее о работе новой нейронной сети написано в статье, опубликованной на сервере arXiv. Разработанная технология предъявляет меньше требований к исходным изображениям, чем все остальные. Возможно, в будущем она станет ещё лучше и будет использоваться в виртуальной реальности.

Источник: 3dnews.ru