在全球数字化转型的浪潮中,人工智能(AI)技术正成为推动行业创新的重要力量。近期,联发科宣布与腾讯会议达成合作,共同推出基于天玑旗舰芯片,且联合优化的端侧NPU虚拟背景功能,为视频会议、直播等场景带来创新解决方案,该方案融合了深度的虚拟背景技术和先进的AI算力,不仅优化了软件层面的AI算法,还充分利用硬件层面上的性能提升,为用户打造更加智能的线上会议新体验。
联发科和腾讯会议的这一合作,将成为端侧AI技术行业绝佳的示范性标杆,加速普及AI技术在日常生活中的使用,实现AI技术的广泛应用与深度融合,迎接万物AI时代的到来!
腾讯会议的虚拟背景功能以人像分割技术为依托,能够在视频会议时自动识别参会人员,并将周围环境替换为指定图像或视频。天玑9400芯片搭载的NPU为腾讯会议的虚拟背景功能实现更精准、更自然的背景替换效果,并提升视频会议的专业度和隐私保护。
具体来说,天玑9400旗舰芯片是一款“高智能、高性能、高能效、低功耗”的5G旗舰智能体AI芯片,集成联发科第八代AI处理器NPU 890,带来突破性的智能化和生成式AI能力,能够利用强大的AI算力,高效处理语音、图像和视频等AI任务。此外,天玑9400配备天玑AI智能体化引擎,支持端侧AI应用,结合时域张量硬件加速、端侧高画质视频生成等先进技术,使得Stable Diffusion端侧运行的性能提升2倍,让用户轻松享受高分辨率生图、端侧动图和视频生成等功能,体验到更多的趣味新玩法。
在天玑移动平台强大的AI算力支持下,腾讯会议将AI人像分割模型迁移至联发科天玑AI处理器NPU上运行,使得AI算法运行更快的同时,还大幅降低算法的CPU占用,节省更多CPU资源,从而提供更流畅且准确的人像分割体验。
腾讯会议的模型设计兼具轻量化与高计算性价比,并结合了卷积神经网络(CNN)及注意力机制等先进深度学习技术,为此,联发科携手腾讯会议,针对模型在GPU和NPU架构上进行协同优化,显著提升处理速度和能效比,使得智能线上会议体验更流畅高效。除了提供强劲的NPU算力等芯片硬件层面支持外,联发科还通过天玑AI开发套件NeuroPilot,为腾讯会议提供模型量化/转换、编译和集成的完整工具链(SDK/API/Document),帮助其更高效地开发和部署基于神经网络的AI应用程序,简化基于AI的应用程序开发步骤。
经由双方联合优化,腾讯会议App虚拟背景功能在天玑9400旗舰芯NPU上运行的版本相较于CPU FP模式性能提升3.5~4倍,执行耗时缩短6ms,并降低运行功耗,进一步延长手机的续航时间。
腾讯会议与联发科的本次合作标志着双方致力于通过软硬生态结合,打造绝佳的性能与用户体验,作为AI技术普惠的一次重要实践,不仅展示了端侧AI应用的强大潜力,也为提升用户体验打开新的思路,为未来更多功能的拓展和技术创新奠定了坚实的基础。
(校对/张杰)