Nvidia створила штучний інтелект, який перетворює 2D-відео на детальні 3D-моделі – відео

NVIDIA представила нову модель штучного інтелекту під назвою Neuralangelo, яка може створювати 3D-копії об'єктів з 2D-відео, будь то класичні скульптури чи звичайні вантажівки та будівлі. Про це повідомляє Nvidia.

Neuralangelo працює, вибираючи кілька кадрів, що показують об'єкт з різних кутів у 2D-відео, щоб отримати чітке уявлення про його глибину, розмір і форму. Потім він створює грубе 3D-представлення об'єкта, перш ніж оптимізувати його, щоб імітувати деталі реальної речі.

В компанії кажуть, що нова модель перейняла технологію від попередньої моделі, Instant NeRF, щоб мати змогу точно передавати найдрібніші деталі того, що користувач хоче відтворити у 3D. Сюди входять текстури, візерунки та кольорові варіації. У NVIDIA зазначають, що здатність Neuralangelo передавати складні текстури, такі як шорсткість черепиці на даху та гладкість мармуру, "значно перевершує попередні методи". Вочевидь, вона навіть дозволяє створювати віртуальні об'єкти з відео, знятих смартфонами, що може дати творцям простий спосіб генерувати 3D-відтворення для своїх проєктів. 

Мінг-Ю Лю, співавтор статті про Neuralangelo, сказав, що це дозволить розробникам імпортувати деталізовані об'єкти – чи то маленькі статуї, чи то масивні будівлі – у віртуальні середовища для відеоігор або промислових цифрових двійників. 

Дослідницький підрозділ компанії представить Neuralangelo на Конференції з комп'ютерного зору та розпізнавання образів, яка відбудеться з 18 до 22 червня у Ванкувері.