Вчені навчилися відтворювати 3D-моделі предметів з їхнього відображення в оці людини

Технологія Neural Radiance Field, призначена для перетворення двовимірних зображень у тривимірні моделі, але вчені з Мерілендського університету США змогли за допомогою цієї технології  відобразити об'єкти в очах людини в якості 3D-моделей. Про це повідомляє офіційна сторінка технології Neural Radiance Field на GitHub.

Для відтворення тривимірної моделі вченим потрібен знімок людини з високою роздільною здатністю. Зображення масштабується, виділяється відображення в рогівках — воно перевертається, проводиться обробка кольору та видалення артефактів, що вносяться рогівками, та спотворень, що обумовлюються формою ока. В результаті будується 3D-модель.

Якість цієї моделі далека від досконалості — в окремих випадках можна ідентифікувати предмети без дрібних деталей, і для ефективної роботи алгоритму потрібне особливе освітлення.

На практиці методику спробували застосувати до кліпів Майлі Сайрус і Леді Гаги, і результат вийшов недосконалим: в очах першої імовірно відобразився освітлювальний прилад, а в другої — щось на кшталт людського тулуба.