多年来,动辄数百万元的设备,让动作捕捉成为了只有影视、游戏、动画领域这些土豪玩家才能玩得起的技术,如今,随着太平洋未来科技自主研发的3D人体姿态捕捉SDK上线,正式宣告,平民玩家可以上线了!
众所周知,传统动作捕捉技术的问题是,其需要依靠大量昂贵和笨重的硬件,同时需要经验丰富的专业人员操作多摄像机设置,演播室环境,以及演员身穿特制的传感器套装,这种技术通常用于电影中。
动作捕捉片场,设备复杂,成本高昂
《指环王》将动作捕捉从摄影棚带到了拍摄片场,让动作捕捉演员的先驱Andy Serkis可以作为咕噜和其他演员互动。
传统动捕的优点是精度高,但缺点却有很多:
1. 价格昂贵,基本上支持大空间定位的产品每平方米的价格为1万元人民币起,土豪才玩得起;
2. 设备复杂,需要架设一定数量的光塔或摄像机,人身上还需要布置繁复的marker;
3. 易遮挡,在做动作的时候部分mark点会被身体遮挡导致定位丢失(解决这个问题的方法就是砸钱多装摄像机...);
4. 受环境影响大,对于部分可见光定位技术而言,工作环境对环境光的要求很高;
5. 数据处理量大,由于mark点数量多,处理起来比较耗时。
6. 如果出现问题,就必须重新拍摄场景,而不是稍后尝试修复数据,并且无法使用它来复制对象或人员无法做到的动作(即不遵循物理定律的动作)。
也因此,一直以来人们对动作捕捉技术望而却。但是近期,太平洋未来科技正式上线自主研发的3D人体姿态捕捉SDK,只需一个2D摄像头,便可完成动作捕捉,为用户提供便捷易用、无需昂贵硬件成本的人姿捕捉及渲染深度算法。
让动捕走出制作难、硬件昂贵、环境复杂的困境
放眼全球市场,当大家还在使用2D人体姿态算法的时候,太平洋未来科技近期已经完成了由2D向3D人体骨骼算法的升级,实现了2D人体姿态捕捉算法无法达到的人体轨迹、角度、速度及加速度4个维度的提升。
用2D摄像头捕捉3D动作,其中骨骼姿势是其中的一大难题,大多数只能稳定捕获局部3D动作,而不是全身。
太平洋未来科技基于自身图像识别算法中的AMreal 光场算法,整合特定人的常规形态和三维空间动作,通过深度神经网络,捕捉现实环境中人的头部、臂膀、手等身体各个像素点,将其输送到网络,并扫描其参数让其固定在一个维度中,从而完全控制目标对象。即使在有障碍物、有遮挡、光线不明朗的情况下,也能高效而准确地识别人体姿态动作。
此套算法,通过解析人体基本形态运动轨迹,将肢体语言进行扫描、追踪、组合、传导人体的动作姿态,上传云端算法库,生成SDK数据包,供研发者直接使用。从而解决调整时间慢、生成时间长、硬件昂贵、环境要求高的困境。
⼈脸姿态捕捉尚且⽀撑了国内新兴AI巨头的产⽣,可以想象,Ai3D⼈体姿态捕捉必将产⽣更⼤的市场价值。
运动训练
获取精准大数据,使运动摆脱依靠经验的状态
对运动训练来说,个性化的训练方案难度不大,难的是动作评测,但人工智能最擅长的事,恰恰是处理数据,做出评估。
太平洋未来科技通过Ai3D⼈体姿态捕捉算法,精准捕捉单个或群体的动作,⽣成BVH数据包,结合⼈体⽣理学、物理学原理,直接担当私⼈教练⻆⾊,让运动训练摆脱纯粹的依靠经验的状态,让运动训练更加精准可靠。
通过数据收集,让运动训练摆脱纯粹依靠经验的状态
应⽤场景:健身康复、个⼈锻炼、体育集训、⼈体⼯程学研究、模拟训练、⽣物⼒学等
动画制作
提⾼动画制作⽔平,使动画制作更为直观且⽣动
我们看到3D卡通动画/武打动作⽚的制作,三维动画设计师得去学习⼈体动态课,深度了解⼈体动态,⽽后建⽴多个⼈体⻣骼,根据剧情所需分别对应调整⻣骼点,再去建⽪肤,建⽑发,最后才能⽣成3D动画⼈物;发展到后来,需要让武打演员穿戴上传感器⾐服及帽⼦,捕捉其动作及表情⽅可呈现群众眼前。
AR+Ai3D人体姿态捕捉变革三维设计复杂的工作形态
太平洋未来科技通过AI3D⼈体姿态捕捉,能实现整个3D创建,解决光线复杂、成本⾼、耗时⻓、普及⾯低的⾏业弊端,真正意义上让设计师从繁杂的设计中解脱出来,变⾰其⼯作⽅式,化繁为简。
应⽤场景:三维设计⾏业、3D动画、社交娱乐、影视、游戏等
在国内,做算法的公司少之又少,而作为一家由一群技术狂热者组成的团队,太平洋未来科技一直专注于人工智能底层算法的研发,到如今已经发展成为一家集光场、图像识别、运动追踪等算法于一体的基础夯实,精确而完整的全球化计算机科学算法研发科技公司。未来,太平洋未来科技将继续在技术研发上一路狂奔,期待它爆发出的能量。