新聞動態

完整實現人性化會議 - 邊緣運算 AI 與 Dante

蓬勃發展的智慧化會議視聽不斷革新,當科技從 Dante 開始將影音數位封包化,實現一條網路線傳輸所有影音與控制訊號,之後再受惠於AI智慧內建邊緣運算的設計,結合晶片多元的自動演算功能,已然走入真正的實現人性化會議進程。

新式與傳統會議系統的轉變

建置過傳統視聽系統的客戶,要從舊式會議視聽轉換會一時感到無所適從,更別提還要加入時下的智慧視訊會議系統,多半困惑於不清楚新式與傳統的轉變進程、以及採用的訊號傳輸技術、線材的差異,其實最明顯有感的改變關鍵在於 - 邊緣運算的設計,而邊緣運算更與 Dante 是密切結合的共生關係,當AI 是「決策大腦」,Dante 就是「神經系統」才能讓一切運作出極高的自動化效能。讓原本需要事事項項人為技術操作、下指令的設備、繁雜的線路與轉碼編碼省下許多成本,更產生趨於人性化的自動察覺與思維,

邊緣運算與Dante共生

所謂「邊緣運算」是指將人工智慧運算能力直接整合在終端設備上的硬體晶片。與傳統將數據傳回雲端伺服器處理的方式不同,邊緣運算晶片讓設備在本地端就能即時分析數據,具備低延遲、省頻寬、高隱私與斷網仍可運作等優勢。傳統的 AI 處理機制往往需要傳輸到雲端伺服器進行分析後再傳回;而邊緣運算的核心邏輯是「將 AI 模型置於設備裡」。單從攝影機與麥克風收集到的資料,無需往雲端去,就可直接在設備內部晶片上進行即時判斷處理。另外像是人臉追蹤、發言者聚焦、自動框選、動態降噪與背景虛化等 AI 功能,反應延遲可以控制在幾毫秒以內回應,避免還要上至雲端傳輸過程可能的中斷、等待的問題。

關於 Dante,是由澳洲 Audinate 公司開發的「IP 影音傳輸協定(AoIP)」。過往傳統會議室需要鋪設大量專用的麥克風線、喇叭線與 HDMI 線;Dante 將高畫質影/音訊號轉為標準 IP 封包,用網路線進行傳輸,如同好幾種線合併在一條,節省掉各樣線材與訊號處理設備的龐大建置,視訊會議中的 AI 智慧(如人聲自動追蹤、視線矯正)就高度依賴 Dante 數據傳輸的時效性才能精準同步。

沒有 Dante 的傳輸,邊緣運算 AI 就無法即時執行;沒有邊緣運算的分析思考,Dante 傳遞的就只是無作用的龐大資料流。當 Dante 徹底解決了 Pro-AV 影音串流在網路上的『傳輸與同步』難題後,邊緣運算加上了『感知與理解』的能力,兩相結合,成就了人性化智慧會議空間的基本。

會議設備裡蘊藏的晶片科技

搭載獨立 NPU 晶片或 AI 專屬處理器的設備已成為一線大廠的高階標配,如:cisco、Logitech、HP Poly…等,依據硬體架構的不同主要分為三大陣營:x86 架構的 AI 電腦晶片(如 Intel Core Ultra)、高階 ARM 架構的行動/物聯網 SoC 晶片(如高通 QCS 系列),以及專用的邊緣運算視覺 AI 晶片(如大廠 Ambarella專用視覺NPU)。應用在搭載 Intel Core Ultra 系列處理器的HP Poly Studio 7 Room Compute、或內建 Ambarella 與 NVIDIA 智慧晶片的羅技與cisco的視訊會議All-in-One 視訊會議系統、cisco Board Pro 互動式視訊會議白板移動式觸控螢幕。

一如 cisco與 NVIDIA 深度合作,其視訊會議機體內建了具備強大神經網路運算能力的 AI 影像與聲學處理晶片。cisco 的產品定位在大型企業、政府機關與高功能型大會議室建置使用為核心,能容納高階晶片的高功耗與高成本,換取最強大的多鏡頭邊緣運算能力,驅動先進的雙攝影機系統,利用在設備裡的 NPU 晶片運作進行的發言者聲源定位、多人畫面分割,以及多聲道硬體級 AI 音訊去噪…等等。

其他主打快速建置、針對中小型會議室的品牌,如 Logitech 的視訊會議設備Rally系列,主要採用 Qualcomm 的 Snapdragon / IoT 視訊處理晶片,Poly HP主要採用 Qualcomm + Intel + 專用 DSP 晶片,Jabra 在 PanaCast 50 等頂級視訊設備中,採用了Edge AI 專用圖像處理器(Edge AI Processors)、Shure 作為專業音訊巨頭,重點放在「邊緣聲學 AI(Edge Audio AI)」採用 FPGA+ 高階 DSP。

綜觀來說,傳統視聽設備的硬體功能在出廠時就已定型,升級功能往往意味著得淘汰舊機。而在邊緣 AI 晶片時代延長了設備的生命週期,企業不必為了新功能頻繁更換硬體。在未來,基本內建高階晶片處理器的視聽設備成為常態,建議企業與機構如超過六年以上未更新,可積極重新規劃會議、共享空間的設備與系統,完整實現人性化且流暢的溝通互動體驗。(文中提到之其他商標,歸各相關公司所有。)