MediaTek与腾讯会议联合优化的端侧 NPU 虚拟背景功能,已在搭载 MediaTek 天玑旗舰芯的终端正式上线。作为双方初次开展的软硬件生态合作,此次联合优化旨在充分利用天玑移动平台的 AI 算力,为腾讯会议用户打造更加智能的线上会议体验。

腾讯会议的虚拟背景功能以人像分割技术为依托,能够在视频会议时自动识别参会人,并将周围环境替换为指定图像或视频。基于自建多样性数据集,AI人像分割技术不但能够在各应用场景中实现稳定精准的人像分割,且模型设计兼具轻量化与高计算性价比。用户使用各种类型的终端,都能获得流畅且准确的人像分割效果。

descript

【腾讯会议APP端-虚拟背景设置】

此次更优性能的端侧虚拟背景功能的实现,离不开MediaTek 天玑旗舰芯提供的强大硬件与算力支撑。天玑9400 旗舰芯集成了 MediaTek 第八代 AI 处理器 NPU 890,能够利用强大的AI 算力,高效处理语音、图像和视频等 AI任务。此外,天玑9400配备MediaTek 天玑 AI 智能体化引擎,支持端侧AI应用,结合时域张量硬件加速、端侧高画质视频生成等先进技术,使得 Stable Diffusion端侧运行的性能提升 2 倍,让用户轻松享受高分辨率生图、端侧动图和视频生成等功能,体验到更多的趣味新玩法。

MediaTek此次携手腾讯会议,针对模型在GPU和NPU架构上进行了协同优化,显著提升了处理速度和能效比,为带给用户更加流畅高效的智能线上会议体验。芯片硬件层面之外,MediaTek还通过天玑AI开发套件NeuroPilot,为腾讯会议提供了模型量化/转换、编译和集成的完整工具链(SDK/API/Document),使其能够更高效地开发和部署基于神经网络的AI应用程序,简化了基于AI的应用程序开发步骤。经由双方联合优化,腾讯会议【虚拟背景】功能在MediaTek 天玑 9400 旗舰芯 NPU上运行的版本相较于CPU FP模式性能提升了3.5-4倍,执行耗时也缩短至6ms,并降低运行功耗,进一步延长了续航时间。

腾讯会议智能应用研发中心负责人左小祥表示:长期以来,除了通过AI算法在软件层优化性能,腾讯会议与底层硬件厂商积极合作,探索在硬件层提升性能与优化用户体验的更多可能。本次与MediaTek的合作,在天玑移动平台强大的AI算力支持下,腾讯会议将AI人像分割模型迁移至MediaTek 天玑 AI 处理器 NPU上运行,使得AI算法运行更快的同时,还大幅降低了算法的CPU占用,节省更多CPU资源。腾讯会议与MediaTek也将在未来更多软硬件生态的合作中,为用户打造更加便捷智能的线上会议体验,目前,腾讯会议已经在天玑9000、天玑9200、天玑9300、天玑9400赋能的多个终端上线【虚拟背景】的端侧NPU版本。欢迎各位天玑用户下载腾讯会议APP,体验高效AI性能加持的开会模式。

此次MediaTek 与腾讯会议的合作是一次基于实际业务场景,并以用户体验为核心的重要移动端AI算力合作。其不仅为未来功能的拓展与创新构建了坚实的基础,也展现了MediaTek与腾讯会议携手推动行业向更高效、智能方向发展的努力与决心。未来,MediaTek 将继续携手腾讯会议,通过软硬件深度协同,共同精进并推动更多前沿AI能力的应用落地,为天玑移动平台上的腾讯会议用户提供更加卓越的使用体验。

*数据来自腾讯会议