ITBear旗下自媒体矩阵:

腾讯会议联手联发科技,天玑平台赋能虚拟背景,端侧AI应用再提速!

   时间:2024-11-27 15:24:51 来源:ITBEAR图源:中关村在线编辑:瑞雪 发表评论无障碍通道

近期,一场科技与通信领域的强强联合引发了广泛关注。腾讯会议与联发科技宣布达成战略合作,携手推出了基于天玑平台的虚拟背景功能,这一创新举措将虚拟背景技术与AI算力深度融合,为移动端会议体验带来了革命性的提升。

此次合作中,联发科技的天玑移动平台扮演了至关重要的角色。该平台以其高智能、高性能、高能效和低功耗的卓越特性,为虚拟背景功能提供了坚实的AI性能基础。特别是最新发布的天玑9400,集成了联发科技第八代AI处理器NPU 890,其AI性能和能效远超以往。天玑9400还支持多项先进技术,如时域张量硬件加速技术和端侧高画质视频生成技术,这些技术的加持使得天玑9400不仅在高分辨率图像生成方面表现出色,还支持端侧动图和视频生成,为用户提供了更多创新玩法。

腾讯会议的虚拟背景功能是一种基于人像分割技术的创新应用。在视频会议中,该功能能够自动识别参会人员,并将其周围环境替换为指定的图像或视频,既保护了参会者的隐私,又增加了会议的趣味性。同时,虚拟背景还可以替代传统的布展背景墙,有效降低了会议成本。为了确保在各种实际应用场景中实现稳定而精准的人像分割,腾讯会议采用了自建的多样性数据集,并采用了先进的卷积神经网络架构和注意力机制等技术,确保了人像分割的流畅性和准确性。

此次深度合作中,腾讯会议与联发科技共同针对模型在GPU和NPU架构上的运行能力进行了协同优化。通过优化,显著提升了处理速度和能效表现,为用户带来了更加流畅和高效的会议体验。联发科技不仅提供了强大的NPU算力支持,还为腾讯会议提供了天玑AI开发套件NeuroPilot软件工具和API。通过这一站式软件解决方案,腾讯会议得以高效开发和部署基于神经网络的AI应用程序,极大地简化了开发步骤。

为了充分发挥天玑移动平台NPU的AI性能,腾讯会议对自研模型中的自定义模块进行了调整和替换。同时,双方还共同设计了模型的最大并行度,进一步提升了AI应用在天玑移动平台NPU上的执行效率。经过联合优化,虚拟背景功能在天玑移动平台NPU上的性能相较于CPU FP16模式提升了3.5至4倍,耗时缩短至6毫秒以内。功耗的降低还有助于减少手机发热,为长时间会议提供了更好的续航保障。

腾讯会议智能应用研发中心负责人表示,长期以来,腾讯会议一直致力于通过AI算法在软件层优化性能。此次与联发科技的合作,是探索在硬件层提升性能与优化用户体验的重要一步。凭借天玑移动平台强大的AI算力支持,腾讯会议的AI人像分割模型得以迁移至天玑AI引擎上运行,不仅AI算法运行更快,还大幅降低了CPU占用,节省了更多资源。目前,腾讯会议已经在天玑9400、天玑9300、天玑9200、天玑9000等多个平台上线了虚拟背景的端侧NPU版本。

举报 0 收藏 0 打赏 0评论 0
 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  RSS订阅  |  开放转载  |  滚动资讯  |  争议稿件处理  |  English Version