騰訊會議發(fā)布騰訊天籟inside3.0:用AI重構(gòu)音視頻,為大模型落地“開路”

AI時代,會議室的良好拾音和區(qū)分說話人技術(shù),是實現(xiàn)語音轉(zhuǎn)文字、字幕翻譯和智能紀要等能力的前提。

4月17日,騰訊會議天籟實驗室發(fā)布騰訊天籟inside3.0升級,在騰訊AI Lab多項技術(shù)加持下,推出16mic多模態(tài)人像分割解決方案,具備智能音幕功能,能夠精準區(qū)分和定位會議室里的發(fā)言人,并升級了去混響效果。

同時,在本屆InfoComm展會現(xiàn)場,MAXHUB、羅技、耳目達、poly、維海德、億聯(lián)網(wǎng)絡(luò)等多家硬件廠商均推出了與騰訊會議合作的新一代場景方案和產(chǎn)品能力。通過領(lǐng)先的音視頻與AI技術(shù),騰訊會議正在持續(xù)助力廠商提升會議硬件的表現(xiàn),提供聽覺、視覺、內(nèi)容上更加沉浸專注的會議體驗。

發(fā)布騰訊天籟inside3.0,升級多項新能力

對線上參會人來說,線下會議室里多人并坐、僅有一個小窗口畫面,想要準確分辨出是誰在說話,難度很大。

騰訊天籟inside3.0方案,涵蓋AI+16陣列麥拾音矩陣+音視頻多模態(tài)識別算法。具備智能音幕功能,能夠精準區(qū)分和定位會議室里的發(fā)言人,并升級了去混響效果。

智能音幕能力,相當于在會議室里建立起虛擬音頻屏障,讓線上發(fā)言人只聽到特定區(qū)域的聲音,減少區(qū)域外的人聲和噪聲干擾。據(jù)介紹,智能音幕支持實時調(diào)整方向。

通過音視頻多模態(tài)AI算法,騰訊天籟inside3.0還支持精準區(qū)分、定位發(fā)言人。基于這項能力并結(jié)合騰訊會議Rooms的多流技術(shù)打造的硬件,可以為每位發(fā)言人提供單獨的視頻畫面,更接近在同一個會議室開會的體驗,提升溝通的臨場感。

天籟inside3.0還提升了去混響表現(xiàn),并基于天籟16麥音頻方案優(yōu)化了降噪模型。實測顯示,在多種會議室噪聲的干擾下,無論發(fā)言人距離屏幕遠近,線上都能清晰聽到聲音。

騰訊會議與MAXHUB聯(lián)合發(fā)布了集成騰訊天籟inside3.0方案的兩款產(chǎn)品。據(jù)介紹,騰訊天籟inside開放了底層坐標給合作廠商,廠商可自行定制發(fā)言人的畫幅比例、多人對話時的切換速度、切換邏輯等,進行二次開發(fā)。

目前,天籟inside音頻解決方案已覆蓋一體機大屏、擴展麥、天花麥等產(chǎn)品,應用在MAXHUB、Newline、海信商顯、耳目達、TCL、維海德、開得聯(lián)、皓麗、大華以及華創(chuàng)等多家知名廠商的會議室硬件中。

生態(tài)伙伴超300家,與廠商聯(lián)合推出多款硬件

本屆InfoComm現(xiàn)場,多家參展廠商均在醒目位置展示了與騰訊會議合作的硬件解決方案。

例如,MAXHUB展示的騰訊會議Rooms21:9超寬屏沉浸式劇場布局,以及羅技展示的騰訊會議Rooms會議室三屏異顯方案,能讓參會者在不同屏幕中獲取更多信息。其中,MAXHUB 視訊智真款 V7 21:9超寬屏在顯示16:9屏幕共享內(nèi)容的同時,左側(cè)面板可展示文字聊天內(nèi)容,右側(cè)展示實時語音轉(zhuǎn)寫和翻譯內(nèi)容。

與poly聯(lián)合展示的騰訊會議Rooms分體式+MRA方案,則為企業(yè)傳統(tǒng)的會議終端擴展出更多新能力。在保護企業(yè)硬件資產(chǎn)投資的同時,讓參會者更聚焦內(nèi)容討論。

在教育場景,騰訊會議與耳目達、維海德共同打造的AI培訓教室方案,通過實時音視頻能力與設(shè)備,支持跨校區(qū)、跨校際、跨國家教學交流,助力師生之間的高效互動交流更聚焦課程內(nèi)容本身,課堂筆記交給智能紀要,讓思考更沉浸。

在應急指揮場景,基于騰訊會議Rooms的多流能力,億聯(lián)推出的Meeting Board 65大屏,可以幫助指揮大廳看清遠程指揮中心每個人的工作狀態(tài),有效提升工作溝通效率。

目前,騰訊會議的合作伙伴數(shù)量已超過300家,涵蓋銷售生態(tài)、硬件生態(tài)、天籟生態(tài)、ISV等多種場景,并涵蓋多種場景解決方案。

騰訊會議于2019年11月上線,至今已穩(wěn)定服務(wù)超25億次協(xié)同,支撐了海量的辦公、教學場景,助力各行業(yè)的辦公人群實現(xiàn)日常辦公、遠程問診、金融路演、互動營銷等場景線上化,并推動線上教學、智慧教室成為教育行業(yè)的常見配置。在騰訊會議的助力下,大量企業(yè)實現(xiàn)提質(zhì)增效。例如,助力騰訊公司自身一年節(jié)省成本5.7億元。

IDC報告顯示,騰訊會議位列中國云視頻會議行業(yè)企業(yè)級市場第一。目前,騰訊會議已經(jīng)廣泛服務(wù)金融、互聯(lián)網(wǎng)、教育、醫(yī)藥、工業(yè)制造等行業(yè),包括中國人民銀行、清華大學、國家電網(wǎng)、中國交建、中國銀行、美的、衛(wèi)龍、國泰君安證券、北京朝陽醫(yī)院等眾多企事業(yè)單位,在多個行業(yè)的頭部客戶滲透率超過50%。

本文轉(zhuǎn)載自:,不代表科技訊之立場。原文鏈接:https://v.mrkbao.com/news/111202404171711587464117859.html

陳晨陳晨管理團隊

相關(guān)推薦

發(fā)表回復

登錄后才能評論