联发科、腾讯会议合作创新!天玑旗舰推出NPU虚拟背景,让视频会议更生动-大浪资讯

admin82024-12-02 16:24:12

联发科、腾讯会议合作创新!天玑旗舰推出NPU虚拟背景,让视频会议更生动

「虚拟背景技术再升级!联发科天玑旗舰携手腾讯会议,视频会议焕发生机」

数界探索

   联发科近日宣布,与腾讯会议合作优化的端侧NPU虚拟背景功能,已成功在采用MediaTek天玑旗舰芯片的设备上正式启用。 这一消息标志着联发科与腾讯会议在提升视频会议体验方面的合作取得了重要进展。通过集成先进的AI技术,用户现在可以在视频通话中享受到更加自然且高效的虚拟背景功能,这不仅提升了隐私保护,也为用户提供了更多的个性化选择。此功能的实现,展示了两家公司在技术创新和用户体验优化方面所作出的努力,同时也预示着未来移动设备在处理复杂图像任务时将拥有更强的能力。随着5G网络的普及和技术的进步,预计这类高级功能将在更多智能设备上得到应用,从而推动整个行业向更高层次发展。

联发科、腾讯会议合作创新!天玑旗舰推出NPU虚拟背景,让视频会议更生动

   该功能基于人像分割技术,可在视频会议期间自动识别与会人员,并将背景替换为预设的图片或视频。

联发科、腾讯会议合作创新!天玑旗舰推出NPU虚拟背景,让视频会议更生动

   基于自建的多样化数据集,AI人像分割技术不仅在各种应用场景中实现了稳定而精准的人像分割,而且其模型设计兼顾了轻量化与高计算性价比。这意味着无论用户使用何种类型的终端设备,都能够享受到流畅且准确的人像分割体验。 从我观察到的情况来看,这项技术的发展无疑为图像处理领域带来了新的突破。尤其在移动设备上,由于硬件资源相对有限,轻量化的模型设计显得尤为重要。这不仅提高了用户体验,同时也展示了人工智能技术在实际应用中的巨大潜力。随着技术的不断进步,我们有理由相信,未来的人像分割技术将会更加智能、高效,并且能够更好地满足不同场景下的需求。

联发科、腾讯会议合作创新!天玑旗舰推出NPU虚拟背景,让视频会议更生动

   用户无论身处何种环境,都能实现流畅且真实的虚拟背景切换,极大地方便了使用体验。

联发科、腾讯会议合作创新!天玑旗舰推出NPU虚拟背景,让视频会议更生动

   为了充分发挥出天玑芯片的AI算力,双方针对端侧AI人像分割模型,在GPU和NPU架构上进行协同优化,显著提升了处理速度和能效比。

   尤其在AI性能方面,天玑9400有了显著提升。得益于新一代NPU 890的支持,在苏黎世ETH AI Benchmark测试中的得分超过了6700分,AI功耗相比天玑9300降低了35%。这一改进使得其在性能和能效上都达到了新的高度。

   得益于性能强劲的NPU890,天玑9400系列能够借助强大的AI算力,高效处理语音、图像和视频等AI任务。这使得在天玑9400NPU上运行的虚拟背景功能版本,相比CPU浮点运算模式,性能提升了3.5至4倍,并将执行耗时缩短了6毫秒,同时降低了运行功耗,进一步延长了电池续航时间,整体体验更加出色。

   此外,天玑9400搭载了MediaTek天玑AI智能体化引擎,支持端侧AI应用,结合了时域张量硬件加速和端侧高画质视频生成等先进技术,使StableDiffusion在端侧运行的性能提升了2倍,让用户能够更便捷地享受到高分辨率生图、端侧动图和视频生成等功能,体验更多趣味新玩法。 这一创新技术不仅展示了 MediaTek 在移动计算领域的领先地位,而且也预示着未来智能手机将更加智能化和个性化。通过提高设备的处理能力,用户可以在不依赖云服务的情况下,在本地设备上实现高质量的图像和视频生成,这不仅提升了用户体验,也为开发者提供了更大的创作空间。随着AI技术的发展和应用的不断深入,未来的移动设备将会变得更加智能,为用户带来前所未有的便利和乐趣。

   这也是真正将AI性能实际落地,让用户真切感受到AI能力的标志性场景之一,让用户能够随时随地的沉浸式开会,再也不用着急忙慌的找背景板。

   腾讯会议智能应用研发中心负责人左小祥表示:本次与MediaTek的合作,在天玑移动平台强大的AI算力支持下,腾讯会议将AI人像分割模型迁移至MediaTek天玑AI处理器NPU上运行,使得AI算法运行更快的同时,还大幅降低了算法的CPU占用,节省更多CPU资源。

   目前,腾讯会议已经在搭载天玑9000、天玑9200、天玑9300、天玑9400的多个终端上线【虚拟背景】的端侧NPU版本。欢迎各位天玑用户下载腾讯会议APP,体验高效AI性能加持的开会模式。

   另外,今年,vivo X200系列和OPPO FindX8系列均率先搭载天玑9400芯片发布,在各个方面全面实现了AI功能的应用。例如,在OPPO FindX8系列上,特别设计了便捷且实用的“一键问屏”功能。

   在小红书中浏览到的旅游攻略,现在可以通过唤出小布助手,发送“制定旅游攻略”来实现。小布助手将通过识别屏幕上的信息,自动匹配用户的个性化需求,一键生成详细的旅游路线规划等信息。这样的智能化服务不仅大大节省了旅行者的时间,还提升了出行的便利性和舒适度。此外,它还能帮助旅行者发现更多不为人知的景点和美食,使旅程更加丰富多彩。不过,值得注意的是,尽管这种技术极大地提升了用户体验,但用户也应适当依赖人工筛选和判断,以确保旅行计划更加贴合个人偏好和实际情况。

   此外,AI超分辨率、AI去噪、AI消除拖影、AI去除反光以及AI文档助手等功能也十分丰富。

   期待未来联发科与设备制造商能够加强合作,早日实现像《钢铁侠》中的贾维斯那样的个性化智能助手。