苹果Apple发布全新生成式AI技术HUGS:30分钟内创建“数字化身”

苹果Apple发布全新生成式AI技术HUGS:30分钟内创建“数字化身”

近日,苹果机器学习研究团队发布博文,展示了全新的生成式AI技术——HUGS,能够在30分钟内分析短视频,然后映射创建新的动作和角度。这项技术的推出,标志着苹果在AI领域取得了新的突破。

HUGS的全称叫作Human Gaussian Splats,使用机器学习和计算机视觉技术,在原始输入数据较少的情况下,创建出逼真的人像元素。这项技术利用3D Gaussian Splatting的技术,在场景中创建可移动的人类。

苹果官方介绍中表示,神经渲染技术目前已经有了长足的进步,但最适合的场景依然是静态场景的摄影测量,还无法推广到环境中自由移动的人类。而HUGS技术可以解决这一问题,使得神经渲染技术在动态场景中的应用更加广泛。

HUGS技术本身需要少量的主体视频,通常在场景中运动,并显示尽可能多的表面供系统工作。在某些情况下,该技术对源输入数据的要求很低,最少可以低至50到100帧的单目视频,相当于2到4秒的24fps视频。这意味着即使只有少量的视频数据,HUGS也能够创建出逼真的人像元素。

苹果声称,该系统已经过训练,可以“在30分钟内解开静态场景和完全可动画化的人类化身”。这一速度比其他方法快100倍,使得HUGS技术在动画制作、游戏设计、虚拟现实等领域具有广泛的应用前景。

苹果表示,SMPL体模型虽然用于初始化人类高斯模型,但无法捕获每个细节。对于未建模的元素(如布料和头发),该过程可以偏离SMPL模型,来填补模型捕获中的空白。这一技术的推出,使得苹果在人体建模和动画制作方面取得了重大突破。

总的来说,苹果发布的全新生成式AI技术HUGS是一项具有划时代意义的技术创新。它利用机器学习和计算机视觉技术,在原始输入数据较少的情况下,创建出逼真的人像元素。这一技术的推出将为动画制作、游戏设计、虚拟现实等领域带来革命性的变革。未来,我们有理由相信苹果将在AI领域取得更多的突破和创新。

原创文章,作者:秋秋,如若转载,请注明出处:https://www.kejixun.com/article/609004.html

(0)
秋秋的头像秋秋管理团队

相关推荐

发表回复

登录后才能评论