4月19日,高通在深圳举办了一年一度的“Qualcomm人工智能开放日”(又称AI DAY)。其中,一直走在国内人工智能领域最前沿的百度作为高通的合作伙伴之一,出席了高通AI DAY活动展区,展示了视频AR特效的最新成果。
和其它展位画风略有不同的是,这片承载了百度大脑与高通的AI能力的展区体现并不是冰冷硬核的“黑科技”,而更像是每一位现场观众都可以亲身参与、互动玩乐的“园游会”。从可爱的“肢体pose特效”到魔性的“哈哈镜”,百度大脑牵手高通,将如今日新月异的AI技术以一种更“触手可及”的体验展现在公众面前。
用硬核AI科技“卖萌”,百度大脑的展区都能玩些什么?
如今智能手机设备发展迅猛,外加5G商用时代的到来,以往只能在云端处理的AI技术终于有了在终端侧运行的希望。因此,手机在不远的将来很可能会成为世界上最大、最普及的终端侧AI平台,承担起更多AI终端侧的应用。百度大脑联合高通在现场展现的AR互动新玩法,将大幅提升时下流行的手机视频拍摄、直播等应用的用户体验。
在高通AI DAY现场,参会嘉宾与现场媒体都在百度展区内率先体验到了百度AR即将发布的肢体跟踪、触发、变形等特效创新玩法。
比如“桃心跟随”的肢体跟踪特效,可以通过人体骨骼点精准识别镜头前人物的头部,触发桃心动画,并稳定跟踪,让爱拍视频的小仙女们实现头顶的桃心“走到哪跟到哪”的神奇效果。又比如“跺脚烟雾”的肢体触发特效,你只要原地跺一跺脚,就会触发屏幕的粒子特效,形成“排山倒海”般的烟雾效果。
不过,最吸引参展嘉宾们纷纷驻足试玩到“根本停不下来”的,还要数“哈哈镜”的肢体变形特效:可对脖子、大臂、小臂、大腿、小腿、腰部、肩膀等部位变形拉伸,你可以尽情选择“高脚杯型”、“水滴型”和“波浪型”三个不同模板,欣赏镜头前充满“魔性”的自己,体会一把重返童年游乐园的快乐。
据悉,以上AR肢体能力与创新玩法,结合百度加持了高通的SNPE预测框架的AR SDK创新成果,将应用于视频特效领域激发更多创意,广大用户预计在下一个版本的全民小视频APP中就可以亲自体验尝鲜。而且,据百度AR方面介绍,这种新奇的AR功能并非只是“顶配机型”的专属,百度AR经过不断优化已覆盖当前市场高、中、低端主流机型。
玩转AR的背后,是百度大脑强大技术实力的保驾护航
其实,在AI DAY上的惊艳亮相只是百度大脑AI能力的“冰山一角”。在百度大脑计算机视觉技术的支持下,最新的百度AR SDK 3.2版本将全面升级底层算法能力,进一步完善AR视频特效解决方案,持续引领业界能力及玩法风向标。比如,基于人脸、美化、人体、环境特效四大方向的AR技术能力与视频特效解决方案,很快将通过百度AR SDK及百度云平台向开发者全面开放。视频创意者和摄影达人们有福了!
如何将AR特效这样需要消耗大量终端计算能力的技术,赋能到每一台普通手机上,让玩转终端应用的每一位小白用户都能享受极致流畅的体验,甚至意识不到技术的存在呢?
在百度AR即将推出的最新版SDK中,整合了高通SNPE预测框架,有效释放了移动设备计算效能、大幅提升用户AR体验。以肢体特效SDK为例,高通与百度的合作有三大特色:更快的预测速度、更少的资源占用和更好的用户体验。
首先,相比使用单核CPU,高通SNPE的GPU模式为百度AR模型提供了高达5倍的加速效果;其次,减少一半的CPU负载,将CPU从繁重的预测任务中解放出来,用于支持其他的AR互动效果;最后,实测功耗有近0.5W的降低,用户可以长时间使用AR肢体交互,而不会有手机明显发烫、降频降速的困扰,多种AR效果同时使用也不会卡顿。
为百度AR能力保驾护航的是百度AI的核心技术引擎——百度大脑。据了解,百度大脑包括视觉、语音、自然语言处理、知识图谱、深度学习等AI核心技术和AI开放平台。截止目前,百度大脑已对外开放了150+项领先的AI能力,构建起AI全栈技术布局。未来百度将继续平等赋能开发者,让每一位开发者都能平等便捷地获取AI能力。