腾讯会议又一黑科技,屏蔽超过200种会议噪声是如何做到的?

AI科技大本营 AI科技大本营     2022-12-06     557

关键词:

作者 | 伍杏玲

出品 | AI 科技大本营(ID:rgznai100)

远程会议已成为我们常规的工作沟通方式,在线交流打破时间、空间的限制,给予我们便利之际,也屡遭尴尬:

忘记静音,一边听会一边敲键盘,被对方提醒:“XX,麻烦静下音”;

自己正在讲话呢,身旁人走来走去有噪音,影响会议收听效果,你恨不得马上转移开会阵地……

后疫情时代,远程会议有以下发展趋势:远程协作占员工的工作时间50-80%,线上线下混合会议将超过90%,视频会议功能将成为大部分会议的标配。因此提高远程会议的交互体验已成为厂商迫在眉睫的事。

为了应对以上会议室各种复杂声学场景下的开会难题,腾讯会议旗下天籁实验室推出天籁语音模组方案,由腾讯AILab 技术加持,实现12米超长距离拾音,消除超过200种会议噪声,在双讲、回声消除等方面实现突破性升级。

 

天籁语音模组加持,立即开启自动“屏蔽杂音”模式

 

天籁语音模组能消除超过 200 种会议噪声是怎样的概念?

腾讯天籁实验室资深研究员刘成做了以下演示:在顶端装有天籁模组的屏幕那头用力敲打键盘、做桌椅碰撞,笔者与之实时连线,并没有听到键盘噪音,宛如开启了“噪声静音”模式。

刘成表示,还有空调噪声、翻纸张、塑料瓶、水杯、雨打在窗户上、外面马路施工、脚步等 200 多种声音,可通过 AI 算法降噪处理。同时天籁语音模组基于深度学习模型,也能将空调声、风扇声等平稳噪声消除。

刘成尝试在距离屏幕 2 米 和 8 米的位置讲话,收听效果变化不大。这是因为天籁模组是全面 180 度拾音,不管讲话人从左边、右边、前面、后面走动变化,声音变化不大。在双讲测试里,刘成和另一人同时发声,两者声音均能清晰听到,并无剪切感或回声泄露情况。

据刘成介绍,天籁语音模组结合房间声场感知、采集和空间声场重建技术,远场多人音频通信、多讲话人实时追踪、多人自动取景等实时音视频技术难题,帮助企业和用户实现在远场复杂物理空间下通信体验的突破性提升。

例如针对讲话者离屏幕较远时,可能存在听不清、声音小的情况,天籁语音模组方案将多个 MEMS 麦克风板嵌入到会议大屏中,结合音频处理器,能够实现 180 度广角、12 米超长距离拾音,让参会者可以像面对面交流般清晰、自然,并给与参会者更灵活的活动空间。

 

基于 20 多年音视频技术经验,打造“软硬一体”的云视频会议生态

 

去年 9 月,腾讯会议发布企业版、会议室连接器以及新一代云视频会议室解决方案“腾讯会议Rooms”,据了解,天籁语音模组将应用于腾讯会议 Rooms 专款机型上,还开放给腾讯会议Rooms专款硬件合作伙伴,助力打造会议室场景高清、纯净、流畅的开会体验。

与此同时,不做硬件的腾讯会议,还通过开放音视频认证标准,联合硬件设备厂商,共同为企业量身打造“软硬一体”的云视频会议解决方案。

腾讯会议天籁实验室技术研发专家余涛介绍“软硬一体”方案背后的几点思考:

一是从商业上,为硬件厂商集成一体化方案提供便利,可快速形成产品能力。

二是从技术上,由于远程语音、噪音等语音的复杂性,仅靠几个算法,即使在深度学习模组加持下,想要较好地解决远场语音问题还是较难的。

自 QQ 推出语音通话开始,腾讯已有 20 年音视频技术的积累。去年成立专注于新一代实时音频技术的天籁实验室,并结合腾讯AI Lab 技术的加持,天籁模组从多维度、多角度、多模态出发,在提升远场拾音能力上拥有天时地利的技术优势。

目前天籁模组将首先服务于腾讯会议 Rooms,相信未来天籁模组可应用在小型会议室、中型会议室、大型会议室、超大型会议室、开放空间等。最后,据余涛透露,与硬件厂商合作的具备天籁音频模组的产品,正在量产中。

更多精彩推荐
GitHub 遭抵制!AI 代码生成神器竟成“抄袭工具”?

基于 Python 的 8 种常用抽样方法

太酷了,Python 制作足球可视化图表 | 代码干货

点分享点收藏点点赞点在看

腾讯会议号设计的几种猜测

可以说疫情给我们打工人带来最大的改变,就是居家办公,而这其中,对工作模式冲击最大的就算是在线会议了,以前都是会议室,面对面交流,现在都是对着一个屏幕,如果有视频的会议还好,... 查看详情

腾讯会议号设计的几种猜测

可以说疫情给我们打工人带来最大的改变,就是居家办公,而这其中,对工作模式冲击最大的就算是在线会议了,以前都是会议室,面对面交流,现在都是对着一个屏幕,如果有视频的会议还好,... 查看详情

腾讯会议软件最多多少人同时同屏?

...运营牌照,是业内知名的通信云产品运营商。参考技术A腾讯会议最多可以300人同时同屏。腾讯会议具有300人在线会议、全平台一键接 查看详情

如何实现webrtc多人视频直播会议?

参考技术Awebrtc多人视频直播会议推荐ZEGO即构科技。只需4行代码,30分钟在APP、Web和小程序等应用内实现视频通话、语音通话,互动直播功能。【点击免费试用,0成本启动】webrtc多人视频直播会议实现原理:1、服务端是用C++配... 查看详情

腾讯会议怎么使用

腾讯会议的使用方法如下:工具:oppoflndx2系统:ColorOS7.1软:腾讯会议3.1.2.4221、打开并登录腾讯会议,界面中有三个功能,分别是“加入会议”、“快速会议”和“预定会议”。首先我们点击“加入会议”。2、输入会议号、你... 查看详情

腾讯技术开放日|腾讯会议如何进行视频质量评估与优化?

原文 查看详情

企业微信零耦合集成腾讯会议和腾讯文档插件化架构实践(代码片段)

...业微信iOS端作为代码超过800万行的大型项目,接入了腾讯会议、腾讯文档、企业邮箱等功能插件。要融合多个异构系统、支撑多个团队同时协作开发一个APP是极大的挑战。同时,迅速膨胀的代码量和功能模块数量给企微... 查看详情

mac腾讯会议摄像头打开了,要好久才有图像

...有重装过电脑系统,如果有,可以考虑重装系统试一试。腾讯会议(TencentMeeting,TM)RestAPI是为参与腾讯会议生态系统建设的合作方开发者接入并访问腾讯会议资源提供的一组工具,是访问腾讯会议SaaS服务的入口。合作伙伴可以... 查看详情

企业微信零耦合集成腾讯会议和腾讯文档插件化架构实践(代码片段)

...业微信iOS端作为代码超过800万行的大型项目,接入了腾讯会议、腾讯文档、企业邮箱等功能插件。要融合多个异构系统、支撑多个团队同时协作开发一个APP是极大的挑战。同时,迅速膨胀的代码量和功能模块数量给企微... 查看详情

腾讯会议obs怎么使用

参考技术A腾讯会议obs使用方法如下:1、首先我们打开obs软件,点击“工具”并打开“虚拟摄像头”。2、打开后,直接点击右下角“启动”。3、启用后,点击图示“+号”,再选择创建“视频采集设备”。4、然后在其中放一段视... 查看详情

国产国脑与腾讯会议配合挺默契

参加一个网上业培训,需要使用腾讯会议。在国产电脑上的“软件商店”里只找到“腾讯会议(移动版)”,先启动运行环境,然后安装运行,再用微信登录。 腾讯会议(移动版)默认是竖屏࿰... 查看详情

线上圆桌整理-腾讯会议进化中的视频会议

...及新能力引入都会带来新的可能和机遇。本次演讲邀请到腾讯会议产品部网络技术组许景禧分享腾讯会议最近在网络质量分析方面的工作(本文略过),以及探讨近期热门的光场会议,与大家交流视频会议潜在的... 查看详情

maxhub+腾讯会议:为未来办公造一部动力引擎

科技领域有个规律,我们经常高估一年的变化,而低估了十年或者更长时间所可能发生的变化。不信可以做个测试,你觉得未来线上办公会怎么发展?不少朋友会说,既然线上办公是疫情到来之后的PlanB,... 查看详情

centos能用腾讯会议吗

centos能用腾讯会议吗?答案如下:centos能用腾讯会议首先第一步先点击打开设置按钮,然后帐户管理在页面点击账号安全中心进入即可完成!参考技术A举报,投诉。投诉,可以找B站的在线客服进行投诉,只要能证明其他人确实... 查看详情

利用微搭低代码一键创建腾讯会议

...C端或者移动端参会。近期,微搭的外部数据源增加了腾讯会议的能力,在微搭中也可以一键创建会议了。首先登陆微搭的控制台,点击数据源管理点击创建外部数据源我们可以直接创建腾讯会议,点击腾讯会议的... 查看详情

第五周站立会议(伪)

...,锤子的答案是‘大块肉’。”其实今天是想写一点站立会议的,但是看了锤子科技手机发布会,所以时间错过去了,就没有写。不过虽然没有写软件工程的作业,但是我同样得到了这方面的熏陶,看看实际工业界是怎么设计优... 查看详情

利用微搭低代码一键创建腾讯会议

...C端或者移动端参会。近期,微搭的外部数据源增加了腾讯会议的能力,在微搭中也可以一键创建会议了。首先登陆微搭的控制台,点击数据源管理点击创建外部数据源我们可以直接创建腾讯会议,点击腾讯会议的... 查看详情

六大特征,教你如何选择云视频会议

视频会议系统应用已逐渐融入各行业的办公、业务流程,成为一种日常沟通方式。随着IT云化大潮之迅猛,云视频会议的应用不断发展、普及,愈来愈受到用户欢迎。可怎样的视频会议才能成为云视频呢?视频会议厂家众说纷纭... 查看详情