Grand Theft Auto та штучний інтелект допомогли дослідникам перетворити фотографії собак на 3D-моделі
Дослідники з Університету Суррея навчили систему штучного інтелекту передбачати тривимірну позу собаки за 2D-зображенням, яку вони тренували на скриншотах з Grand Theft Auto V.
Про це пише TechXplore.
За словами дослідників, їхня модель навчалася на CGI-собаках з гри. У результаті вони змогли використовувати її для створення 3D-моделей скелетів на основі фотографій реальних тварин.
Це може дозволити захисникам природи виявляти поранених тварин або допомогти художникам створювати більш реалістичних тварин у метапросторі, Мойра Шутер, аспірантка, дослідниця
Як дослідники створюють 3D-моделі собак з фотографій
Один із способів навчити ШІ отримувати 3D-інформацію з 2D-зображень — це показувати йому фотографії та одночасно з цим надавати інформацію про локацію об’єктів у тривимірному просторі.
Зазвичай для фіксування точок людей використовують костюми захоплення руху. Щоб не перевдягати в них собак, дослідники створили безліч віртуальних тварин для вивчення.
Вони використали мод на Grand Theft Auto та перетворили головного героя на одну з восьми порід собак. Після цього вчені створили 118 відеороликів із зображенням цих тварин, які сидять, ходять, гавкають і бігають за різних погодних умов та освітлення.
У результаті команда зібрала датасет DigiDogs, який складається з 27,9 тис. окремих кадрів. Для доопрацювання алгоритму вони використовують модель DINOv2 від Meta.
3D-пози містять набагато більше інформації, ніж 2D-фотографії. Від екології до анімації — це витончене рішення має так багато можливих застосувань, Мойра Шутер
Источник: speka.media
