Ученые создали нейросеть, которой не требуется дополнительная информация для создания 3D.
Программисты смогли создать сеть, которая самостоятельно изучает развернутую перед ней сцену и сама «достроит» расположение того или иного объекта при неизвестном ракурсе. Сеть снабжена большим набором изображений для обучения. Как правило, на разработку этих материалов уходит большое количество времени и в итоге многие сцены упускаются, что ограничивает алгоритмы машинного зрения.
Теперь разработчики смогли сделать более «человечный» подход. Ими создана среда, в которой агент сам наблюдает трехмерную сцену с нескольких ракурсов, после чего делает ее рендеринг с другого, произвольного угла обзора.
Как показали результаты опытов, нейросеть довольно хорошо воспроизводит реалистичные сцены не имея знаний законов освещения, перспективы либо окклюзии. Также алгоритм может подсчитывать число объектов и классифицировать их, даже если их видимость ограничена. В результате построения программы выглядят довольно реалистично и практически неотличимы от оригинала.
Фото: из открытых источников