当前,数字化进程迅猛,网络会议日益普遍,提升会议体验成为焦点议题。腾讯会议与联发科技的携手合作,取得了引人注目的成效。

合作意义非凡

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第1张

腾讯会议与联发科技的合作具有显著价值。双方这是首次开展联合优化合作。此合作旨在充分利用AI算力,构建软硬件生态。2023年,该合作成果在全球范围内初显成效。它为众多寻求高品质会议体验的用户提供了更加智能、高效、安全的服务。此外,该合作在AI应用领域树立了典范,具有行业示范作用。对远程办公群体而言,优质的会议体验至关重要,此次合作无疑将对他们的工作效率产生正面效应。

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第2张

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第3张

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第4张

天玑提供AI底座

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第5张

在本次合作中,天玑移动平台扮演了关键角色。在中国多个地区,众多用户依赖搭载天玑芯片的设备。该平台为腾讯会议的虚拟背景功能提供了坚实的AI性能支持。作为联发科技开发的移动平台,天玑所集成的NPU展现了卓越的处理效能。显然,若无强劲硬件支撑,软件功能将受影响,这一点在合作中尤为突出。天玑为软件在硬件上的顺畅运行打下了坚实基础。

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第6张

腾讯会议的技术支撑

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第7张

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第8张

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第9张

腾讯会议的成功离不开其强大的技术支撑。该平台基于天玑移动平台的NPU技术,实现了AI人像分割功能。腾讯会议利用自建的多样化数据集,其中汇集了众多人物样本和场景信息。自2022年起,腾讯会议便着手收集相关技术研发资料。这一数据集确保了人像分割在实际应用中的稳定性和准确性。此外,腾讯会议在模型设计上追求轻量化与高效计算。通过采用先进的卷积神经网络等技术,并融合前沿技术,确保了用户设备的流畅使用体验。这表明腾讯会议在提升会议体验方面进行了大量的技术规划和研究。

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第10张

联发科技全方位助力

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第11张

联发科技在合作中对腾讯会议给予了全面支持。这不仅体现在芯片硬件方面,比如通过提供强劲的NPU算力。在中国地区,众多设备因采用联发科技芯片而展现出优异的性能。此外,联发科技还向腾讯会议提供了天玑AI开发套件NeuroPilot的软件工具和API。借助NeuroPilot这一综合软件方案,腾讯会议得以获得全面的工具链,包括模型量化、转换、编译和集成等环节的SDK、API和文档。这使得腾讯会议在天玑移动平台上开发基于神经网络的AI应用更为便捷,显著减少了开发步骤和成本。

腾讯会议携手联发科技,天玑9400 NPU助力虚拟背景功能,AI性能再创新高  第12张

双方的联合优化

联合优化成果显著,双方对模型进行了细致的调试与改进。腾讯会议针对天玑移动平台NPU的AI性能,实施了多项调整措施。例如,对自研模型中的定制模块进行了优化与替换。此外,双方协作确定了模型的最大并行度,有效提高了AI在天玑移动平台NPU上的执行效能。实验数据表明,此优化使得虚拟背景功能在天玑移动平台NPU上的性能相较于CPUFP16模式版本有显著提升,性能增幅可达3.5至4倍,同时执行时间缩短至6毫秒以内。这一进步对普通用户及大型企业使用腾讯会议进行会议均具有显著便利性。

对未来的展望

左小祥,腾讯会议智能应用研发中心的负责人,对未来的发展充满期待。腾讯会议持续致力于多方面性能的改进。近年来,除了对软件层面的AI算法进行优化,还积极寻求与芯片设计企业的合作,如与联发科技的协作,旨在通过硬件层面提升性能和改善用户体验。此次合作利用天玑平台的强大AI算力,将AI人像分割模型迁移至天玑AI引擎运行,有效提升了算法速度,降低了CPU的使用率,节约了CPU资源。展望未来,腾讯会议计划继续深化AI技术在会议前端领域的应用。同时,公司也将积极参与更多软硬件生态的合作,致力于为全球用户提供更优质的会议体验。目前,已在多个天玑平台推出支持虚拟背景的端侧NPU版本,这只是初步尝试。那么,腾讯会议与联发科技未来将有哪些新的合作成果?对此合作您有何看法?欢迎点赞、分享并留言讨论。