由于萨里大学的一项获奖研究和著名的电子游戏《侠盗猎车手》，狗的照片很快就可以用来帮助生成比以往更精确的3D模型。
研究人员教人工智能(AI)系统从狗的2D图像中预测3D姿势，他们用《侠盗猎车手5》中创建的图像对其进行训练。
“我们的模型是在CGI狗上训练的，但我们可以用它来根据真实动物的照片制作3D骨骼模型。这可以让保护主义者发现受伤的野生动物，或者帮助艺术家在虚拟世界中创造更逼真的动物，”研究生莫伊拉·苏特说。
教人工智能从2D图像中获取3D信息的一种方法是向它展示照片，同时向它提供有关3D“地面真相”的信息——物体在3D空间中的实际位置。对人类来说，这意味着穿上动作捕捉服。
即使它们表现最好，让几十只狗穿上动作捕捉服也是很有挑战性的。
相反，研究人员创造了无数的虚拟狗来研究。
研究人员修改了《侠盗猎车手》的代码，将主角换成了八种狗中的一种——这一过程被称为“改装”。他们制作了118段视频，内容是狗在不同的天气和光照条件下坐、走、叫和跑。
该团队将他们的新数据库命名为digidogs——由27900帧组成。他们现在将使用meta的DINOv2模型对其进行微调，以确保它可以像预测真实狗的照片一样预测3D姿势。
“3D姿势比2D照片包含更多的信息。从生态学到动画——这个简洁的解决方案有很多可能的用途，”苏特说。
这项研究在IEEE/CVF计算机视觉应用冬季会议上获得了最佳论文奖。
更多信息:DigiDogs:使用合成训练D对狗进行单视图3D姿态估计引用:侠盗猎车手和AI帮助团队将狗照片转换为3D模型(2024年，2月28日)检索自2024年2月28日https://techxplore.com/news/2024-02-grand-theft-auto-ai-team.html此文档受版权保护。除为私人学习或研究目的而进行的任何公平交易外，未经书面许可，不得转载任何部分。内容仅供参考之用。
