Grand Theft Auto та штучний інтелект допомогли дослідникам перетворити фотографії собак на 3D-моделі

Дослідники з Університету Суррея навчили систему штучного інтелекту передбачати тривимірну позу собаки за 2D-зображенням, яку вони тренували на скриншотах з Grand Theft Auto V.

Про це пише TechXplore.

За словами дослідників, їхня модель навчалася на CGI-собаках з гри. У результаті вони змогли використовувати її для створення 3D-моделей скелетів на основі фотографій реальних тварин. 

Підписуйтеся на наші соцмережі

Як дослідники створюють 3D-моделі собак з фотографій

Один із способів навчити ШІ отримувати 3D-інформацію з 2D-зображень — це показувати йому фотографії та одночасно з цим надавати інформацію про локацію об'єктів у тривимірному просторі.

Зазвичай для фіксування точок людей використовують костюми захоплення руху. Щоб не перевдягати в них собак, дослідники створили безліч віртуальних тварин для вивчення. 

Вони використали мод на Grand Theft Auto та перетворили головного героя на одну з восьми порід собак. Після цього вчені створили 118 відеороликів із зображенням цих тварин, які сидять, ходять, гавкають і бігають за різних погодних умов та освітлення.

У результаті команда зібрала датасет DigiDogs, який складається з 27,9 тис. окремих кадрів. Для доопрацювання алгоритму вони використовують модель DINOv2 від Meta.

Раніше SPEKA писала, що вихідний код GTA V злили в інтернет.