云从科技3D人体重建技术创造最新世界纪录

近年来,应用场景的旺盛需求,正推动人工智能领域技术能力从感知延伸到认知、从2D扩展到3D。记者从两江新区获悉,3月19日,入驻两江数字经济产业园的重庆中科云从科技有限公司(以下简称云从科技)宣布其基于单帧图像的3D人体重建技术同时在Human3.6M、Surreal和UP-3D三个全球权威数据集上刷新世界纪录。

据悉,这是继去年在3D人脸数据集上大幅刷新纪录后,云从科技再次在此类3D重建技术上取得的重要成果。该技术突破将原有3D重建技术的最低误差纪录大幅降低30%,将技术的执行速度从之前的上百毫秒降低到仅需5毫秒。精度与速度两个指标都达到了世界顶尖水平。区别于传统3D重建技术大多需要连续的图像序列或是多视角的图像,在硬件设备上一般需要采用双目摄像机或者结构光摄像机等设备的局限,基于单帧图像的3D重建技术使其对原始图像的需求降低,从而降低了建模成本,也使建模更简单。

“3D重建技术就是根据一张照片重建完整的3D模型,以前需要专业设备和专业技术,现在老百姓拿个手机也能进行。” 云从科技相关负责人介绍说。记者了解到,针对人体具有丰富多样的姿态与穿着的特点,云从科技此次提出了一套全新的基于人体3D纵深预测的3D信息表征方式。即通过对三原色图像(RGB,不含深度信息)的分析,预测人体的3D形态和姿势,并用6万多个点完整描绘人体,从而在人体重建技术上取得速度与精度的双突破,使呈现出来的模型更精细,帧率更是高达到200fps。

“此次我们的突破使技术在应用时降低了对输入图像的要求, 3D重建技术将可以利用普通光学摄像头作为感知设备。这意味着原本由于受实时显示限制而无法实现的应用可以一一实现,将极大地推动相关智能图像应用的落地步伐。” 云从科技相关负责人举例道,大型商场、直播平台、美颜软件、影视特效制作等行业都能因此受益。

据介绍,Human3.6M、Surreal和UP-3D是全球关于3D人体重建技术的权威数据集,加州大学伯克利分校、马克斯-普朗克研究所、Amazon、宾夕法尼亚大学、北京大学、浙江大学、Microsoft Research、法国国家信息与自动化研究所、Adobe Research等知名企业、研究所和大学都在该榜单的竞争队列中,算法实力比拼激烈。相较以往,中国企业与高校机构正逐渐在国外老牌优势领域展露头角。

作为国家级开发开放新区,两江新区正不断以数字经济助推高质量发展,加速聚集了一批包括云从科技在内的创新型企业、独角兽企业,区内企业多次创下世界纪录。(王丹)

文章内容来自网络,如有侵权,联系删除、联系电话:023-85238885

参与评论

请回复有价值的信息,无意义的评论将很快被删除,账号将被禁止发言。

评论区