廣州熱線

　　12月19日至20日，由騰訊主辦的2020Techo Park開發(fā)者大會于北京順利召開。本次大會匯聚了全球頂尖行業(yè)專家和技術(shù)愛好者，聚焦音視頻、大數(shù)據(jù)、人工智能、5G邊緣計算及物聯(lián)網(wǎng)等眾多熱點技術(shù)話題展開深度探討。

　　2020年突如其來的疫情，讓數(shù)字通信成為人與人溝通的重要手段，同時也對實時音視頻通信的穩(wěn)定性和通訊效果帶來了極大考驗。在網(wǎng)絡(luò)傳輸過程中，實時音視頻通信需要面對用戶體驗、運營成本的雙重約束。

　　會上，騰訊天籟實驗室專家研究員肖瑋發(fā)布了《聯(lián)合信源信道編碼技術(shù)白皮書》，結(jié)合信源、信道的聯(lián)合優(yōu)化策略，綜合經(jīng)典信號處理和深度學(xué)習(xí)新技術(shù)的騰訊天籟聯(lián)合信源信道編碼方案，目前該方案已在騰訊會議等億級產(chǎn)品中進行驗證，在保障用戶體驗的同時，顯著降低帶寬和延時。

　　騰訊天籟實驗室專家研究員 肖瑋

　　疫情常態(tài)化下，實時音視頻通信面臨用戶體驗和運營成本雙重考驗

　　2020年疫情突如其來，在線辦公、在線教育等需求的增加，對實時音視頻通信RTC的穩(wěn)定性和通訊效果提出了極大考驗。由于業(yè)務(wù)量激增，在保障用戶體驗方面，RTC業(yè)務(wù)面臨著諸多困難，包括但不限于通話質(zhì)量、最小化卡頓、端到端延時、帶寬成本等。在網(wǎng)絡(luò)傳輸過程中，RTC方案需要面對用戶體驗、運營成本的雙重約束，挑戰(zhàn)很大。

　　肖瑋對RTC復(fù)雜的鏈?zhǔn)较到y(tǒng)進行了介紹，以單側(cè)的發(fā)送端到接收端通信為例，RTC要經(jīng)過采集、前處理、編碼、傳輸、解碼、增強、回放等多個階段，每個階段都會影響最終體驗。從端到端到角度，影響通話體驗的因素，可以分成信源和信道鏈路兩個部分。采集端只有完整地將信源傳輸?shù)浇邮斩?，用戶才能獲得高質(zhì)量體驗;否則，如果中間數(shù)據(jù)包丟失了，就會發(fā)生聲音卡頓等現(xiàn)像。

　　端到端視角下音頻通話體驗的影響因素

　　肖瑋強調(diào)，RTC業(yè)務(wù)中，傳輸過程中出現(xiàn)丟包是一個重要的挑戰(zhàn)。因此，網(wǎng)絡(luò)抗性提升是RTC業(yè)務(wù)繞不開的話題。針對網(wǎng)絡(luò)抗性問題，主流的RTC解決方案是圍繞信道側(cè)方法進行。如果完全依賴信道側(cè)方法，實際應(yīng)用中又面臨著其它問題。一方面，如果網(wǎng)絡(luò)抗性完全來自于帶外，將會導(dǎo)致帶寬成本激增;另一方面，重傳等操作意味著要進行包的組合、解析等迭代操作，增加時延。因此，要打造一個好的RTC通話體驗，需要聯(lián)合信源和信道，自頂向下地設(shè)計系統(tǒng)。

　　騰訊天籟聯(lián)合信源信道編碼方案針對網(wǎng)絡(luò)抗性提出三大策略

　　為了解決以上問題，騰訊天籟實驗室提出了聯(lián)合信源信道編碼策略，并發(fā)布了《聯(lián)合信源信道編碼白皮書》。首先，提升信源側(cè)方法的能力上界。相對于標(biāo)準(zhǔn)帶內(nèi)FEC，新的信源側(cè)FEC需要更強的單獨抗性。比如，支持40丟包率。其二，靈活調(diào)用帶外和帶內(nèi)抗性，以期在抗性穩(wěn)定性和帶寬消耗上有一個更為靈活的折衷。相關(guān)的控制參數(shù)，借助于測試平臺提供的經(jīng)驗數(shù)據(jù)進行迭代升級。第三，前向兼容性問題，要保證新舊兩種協(xié)議無互通問題。

　　聯(lián)合信源信道編碼基本框架

　　據(jù)肖瑋介紹，騰訊天籟聯(lián)合信源信道編碼方案，通過有效地組合信源和信道側(cè)的抗性策略，保證用戶體驗的同時，有效降低帶寬和延時成本。值得一提的是，在各種網(wǎng)絡(luò)傳輸條件下的測試結(jié)果標(biāo)表明，該方案可以降低帶寬30;同時，進一步降低延時40-60ms，進一步提升用戶體驗。

　　目前，騰訊天籟新新技術(shù)聯(lián)合信源信道編碼方案已經(jīng)在騰訊會議上線。肖瑋表示，結(jié)合了信源、信道的聯(lián)合優(yōu)化策略、結(jié)合經(jīng)典信號處理和深度學(xué)習(xí)的新技術(shù)，將成為未來RTC解決方案中的關(guān)注點。此次聯(lián)合信源信道編碼方案的發(fā)布，也標(biāo)志著騰訊天籟實驗室在實時音視頻通信領(lǐng)域的又一個突破性進展。

　　一直以來，為了解決實時音視頻應(yīng)用場景下的各種挑戰(zhàn)，騰訊天籟實驗室圍繞音頻通信核心體驗的技術(shù)和框架進行了深入的探索。在今年9月舉辦的騰訊全球數(shù)字生態(tài)大會上，正式發(fā)布了“面向?qū)崟r音視頻應(yīng)用的新一代實時音頻技術(shù)品牌”——騰訊天籟。

　　肖瑋表示，騰訊天籟技術(shù)和聯(lián)合信源信道編碼方案僅僅是一個開始，未來，騰訊天籟實驗室將繼續(xù)鉆研音視頻新技術(shù)為滿足更多行業(yè)場景下的實時音視頻需求，推進更多更豐富的場景落地而努力。