回到主页

汽车秒变大黄蜂,这项实时AI研究让我们看到了AR互动的未来

AR互动,未屿科技,

· 行业动态

在抖音、Snapchat等社交平台推动下,AR互动滤镜在主流市场的使用率越来越高,除了用来拍有趣的视频外,还可以用来宣传商品,比如试穿服装、鞋、口红颜色等等。目前,AR互动技术还处于发展初期,距离科幻剧中描述的场景还有较大差距,需要解决沉浸感、稳定性、低延迟等问题。

AR互动

比如在某部美剧中,主人公通过AR互动设置服装的外观,即使只是穿了白T恤也可以改变在别人眼中你的形象。实际上,这种自然、沉浸式的AR互动效果,目前已经开始崭露头角。

近期,杜伊斯堡·埃森大学和瑞士联邦理工学院的科研人员们,研发了一种可以在移动设备上运行的实时AR互动渲染应用TransforMR。从演示视频来看,TransforMR可以将真实场景中识别到的汽车、人、动物等目标实时转化成AR互动图像,效果足够实时。据悉,这并不是后期处理的,而是实时抠图并叠加的AR。细节方面,TransforMR在Unity中运行3D场景并输出渲染的AR互动场景,在摄像头视场角内,可同时追踪多个目标,并同时叠加AR滤镜。

TransforMR的另一个关键特征是,支持实时姿态识别,可识别人体上18个节点,接着将AR互动图像绑定在节点上,即可实时模拟人的动作。也就是说,它与市面上只能识别几何表面的AR互动渲染方案不同,模拟姿态的效果更准确。

科研人员表示:近年来,计算机视觉技术在不断发展,尽管如此,算法对场景的语义识别、功能性推理效果依然限制着AR互动场景渲染的效果。为了解决这一问题,科研人员研发了TransforMR方案,它的特点是支持3D姿态识别,可用AR互动图像动态、实时替换真实场景中的物体或人。即使是在此前未测试过的环境中,TransforMR也可以实时识别并替换AR互动内容,而且AR可以根据其背后的真实物体的行为而动态变化。

实际上,手机滤镜已经可以实时追踪和渲染AR互动效果,但大多数以识别特定物体为基础,除了人脸滤镜外,还包括宠物滤镜等等。相比之下,TransforMR可快速识别更多样化的真实物体,并追踪物体、人的动作和位置变化,实时叠加清晰动态的AR互动特效。而且这个方案在移动设备上就能运行,不需要昂贵的动捕技术,在户外也可以使用。

未屿科技-AR互动定制专家

联系电话:13961729835(微信同号)

邮箱地址:1587560351@qq.com

地址:无锡市惠山区堰桥街道缤悦湾电商公寓136-1-1806

未屿微信号

所有文章
×

还剩一步!

确认邮件已发至你的邮箱。 请点击邮件中的确认链接,完成订阅。

好的