聲網 Agora 的 2019

50+新增數據中心

300%全網帶寬容量上漲

中國區支持百萬大頻道動態擴展能力

海外大頻道擴容時間縮短50%

日分鐘數超過6億

支持 5G 網絡下高清、大碼率視頻傳輸

移動端超分、感知視頻編碼、AI 降噪等新技術落地

歲月不待人,2019年,已經過去。

我們和你一樣,

在通往實時互聯網的路上狂奔,

創造從未停歇。

新技術探索全面落地

在我們與開發者、客戶們攜手拓展新場景的同時,我們的技術根基也更加深固。我們在 2019 年落地了多項技術探索。

業界首個商用移動端超分算法

聲網Agora 的視頻超分辨率技術,可以將實時傳輸中的視頻在原有分辨率的基礎上實現兩個方向的2倍同步放大,並獲得顯著的細節增強,全面提高原有視頻分辨率。聲網Agora 超分算法同時支持在雲端和移動終端上實時運行,並可以在移動終端上達到非常出色的效果。這是行業內首個可實時運行於移動設備端上的超分算法模型。

視頻:聲網移動端視頻超分效果

編碼更高效

 感知編碼

可在畫質不變的情況下,幫助用戶節省更多的碼率,能大幅節省使用帶寬 ,或在一些場景下可以提升畫面的流暢性。

 支持H.265

我們現已全面支持 H.265,在傳輸同等質量的視頻時,帶寬佔用只需 H.264 的一半。

 軟編更高效

我們在傳統的 PRIM 算法上進行了優化,在軟件編碼器上開啓後,對圖像運動相對簡單的場景,可節省其 20%的帶寬。

高音質語聊房全面升級

Agora SDK 已全面支持 20kHz 高頻譜、48kHz 全頻帶高音質應用,可以全面保證頻譜的豐富性、飽和度和高保真度。優化了弱網環境下的音頻表現,在70%的丟包情況下,仍能獲得流暢的高音質表現。並提供接近專業調音效果的聲音美化功能。

人工智能加持的下一代音頻引擎

在音頻方面,也有 AI 應用落地。一方面全新的 AI 降噪技術,可有效地處理噴麥、電流音等常見聲音干擾;另一方面,利用AI 丟包隱藏技術有效保證弱網情況下的有效溝通。

“專線”級別傳輸質量

 進一步提升優質傳輸率

Agora SD-RTN™ 作爲承載 RTC 業務的實時傳輸網,在 2019 年也得到了進一步的優化。目前網內傳輸,通話送達率已達到 99.9%。我們還優化了東南亞、印度、南美等地區的傳輸覆蓋,這些地區的優質傳輸率已經達到 95%以上,進一步提升了泛娛樂、教育等多種場景的互動體驗。

 降低“錯分率”

通常來講,國內傳輸的數據可能會遇到“運營商錯分”問題,比如本應在電信網絡內傳輸的數據,會因爲個別中小運營商的服務器分配錯誤,導致跨運營商傳輸。當出現這種情況時,通話的質量就會受到影響。我們在這一年中,針對這個問題進行了一系列的探索與優化,已將“錯分率”降低到 0.1%。

產品革新,服務升級

RTM 全球部署低延時

實時消息(RTM)SDK 在 5 月正式發佈,系統容量提高了數倍並可隨時拓展,支持單頻道百萬級併發在線及億級消息併發。並提供豐富的功能支持語音聊天室、小班課、大班課等等不同業務場景,幫助國內、出海以及海外客戶輕鬆構建實時場景。

RTSA 開放 SD-RTN™ 碼流加速能力

RTSA 實時碼流加速 SDK 主要面向那些自己可以完成軟硬件編解碼或有特殊編碼要求的開發團隊的,RTSA SDK 可以幫助他們解決複雜的實時網絡傳輸問題,讓他們的音視頻數據也可以接入 SD-RTN,獲得覆蓋全球的優質傳輸體驗。

雲端錄製服務,30 分鐘即可快速集成

2019 年中旬,我們正式推出雲端錄製服務。開發者通過 5 個 RESTful API 即可方便快速的開啓和控制雲錄製功能。

推流 3.0,可靠性全面提升

我們在今年對 Agora SDK 升級後,推流服務極大的提高了服務的可擴展性、可靠性和 API 的易用性,並且卡頓率和音視頻質量得到了顯著的改善。目前,推流成功率與 CDN 的握手成功率均超過 99.99%。

水晶球每天提供 3000 億數據點

視頻:水晶球支持大屏監測模式

水晶球(Agora Analytics)是我們發佈的業界首個實時音視頻全通話週期質量監控與分析平臺。水晶球每天有 3000 億數據點,從 App 端到 SD-RTN™,從採集到渲染,爲用戶提供全鏈路的質量透明信息,讓用戶真正做到對自己應用中的實時音視頻數據質量瞭若指掌,支持RESTful API。

技術生態助力實時互動場景升級

在用戶需求和市場環境變化的過程中,聲網的服務也不斷創新升級。我們已與全球 40 多個合作伙伴開啓雲市場,共同創建一個 RTC 實時互聯網生態,幫助開發者加速集成開發,並針對不同實時互動場景的需求,推出多種場景化方案。

穩定支持在線教育全場景

聲網面向雙師課堂、小班課、大班課、AI 互動課堂、音樂教學等在線教學場景,均推出了相應解決方案。在普通語音教學場景下支持8K或16K採樣,在音樂教學場景下覆蓋全頻帶的48kHz採樣;最高可支持 4K 高清分辨率;融合聲網Agora語音引擎與AI音頻降噪算法,針對雙講現象進行了特別優化。

超低延時 H5 實時直播

我們在今年發佈了推出 H5 實時直播解決方案,視頻延時可低至 200ms,純音頻可低至 50ms。它基於 Agora Web SDK 實現,既兼容大部分的 Android 機型、瀏覽器,又可以滿足白板+H5 直播對實時性的要求。

在視頻窗口中尋醫問診

隨着RTC 技術不斷在醫療行業中的滲透,視頻急救、醫學教學、遠程問診、電子處方等場景逐漸 RTC 化,醫生與患者足不出戶,即可在線上完成問診、開藥和教學交流。據某客戶數據顯示,今年有超過 10w 用戶發起在線視頻問診。這一場景就是基於聲網遠程醫療解決方案實現的。

同時,結合聲網RTM SDK、本地錄製和雲端錄製服務,可滿足醫療教學、電子處方等場景對屏幕共享、醫學影像操作、病例實時共享等遠程協作需求。

高可靠的低功耗智能設備方案

自從小天才視頻手錶基於聲網 Agora SDK 實現了視頻通話功能後,我們不僅推出了低功耗智能設備場景方案,並先後集成到了AR 眼鏡、智能攝像頭、智能音箱等產品中。低功耗智能設備場景方案適用於基於 ARM 架構、Android 系統平臺的低功耗智能設備。

泛金融視頻雙錄,數據安全,存儲可靠

我們還推出了泛金融視頻雙錄場景方案,在滿足企業網絡安全要求的前提下,可以實現企業內外網音視頻和信令信息互通,錄製,加密等企業級需求。

全場景支持內容審覈

我們在原有的實時語音互動直播的基礎上,整合業界 Top 3 語音識別服務,推出了業界獨有的一站式智能語音識別方案。開發者只需在應用中集成聲網 Agora SDK,即可讓音頻在實時傳輸的過程中完成語音內容識別與審覈。

視頻會議實現實時雙語字幕

Agora SDK 融合業界領先的語音識別和機器翻譯技術,推出視頻雙向翻譯轉寫功能,可實現在實時視頻會議場景中“中譯英”和“英譯中”的同傳工作,讓視頻會議也能擁有雙語字幕。

一切以開發者爲中心

支持新語言與開發框架

在 2019 年初,Flutter 開始成爲開發者們最關注的技術趨勢之一。我們也率先支持了 Flutter ,並推出 Agora Flutter SDK。

爲了滿足開發者們希望將實時音視頻通話與人臉識別、圖像識別、聲紋識別或與其它 Python 庫結合的需求,能玩出更多花樣。我們發佈了Python SDK,並提供了集成 TensorFlow進行圖像識別的Demo。

目前,我們已推出超過 120 個 Demo。我們在不斷維護、更新代碼的同時,也對大部分的集成文檔 進行了優化,讓它們更加通俗易懂,降低大家的上手門檻。

Github:https://github.com/AgoraIO-Community/

SOLO系列編解碼技術的開源與演進

在今年的 RTC 2019 實時互聯網大會上,我們正式開源了自研的語音抗丟包編解碼器 SOLO 編解碼器,它可以幫助所有正在做實時音視頻的開發者,有效減少丟包對語音通話質量的影響。同時,下一代 SOLO 編解碼器——SOLOX 的技術演進步伐也未停歇。在低碼率下,SOLOX 比 Opus 的抗丟包模式 MOS 分高出了 0.7 以上,且碼流兼容 Opus,即 SoloX 的碼流可以被 Opus 正常解碼。

國內首個 WebRTC 鏡像與開源文檔

在 Demo 以外,我們還爲 WebRTC 開發者建立了國內首個 WebRTC 源碼鏡像,以及開放於 Github 上的 WebRTC 中文文檔。開發者們不用再受限於網絡,可以直接下載、編譯 WebRTC 源碼,還可以閱讀或自行優化 WebRTC 中文文檔。這兩個資源的地址,均已公開在 RTC 開發者社區(rtcdeveloper.com)中和 Github 中。

鏡像地址:https://rtcdeveloper.com/t/topic/14914

開源中文文檔:https://github.com/RTC-Developer/WebRTC-Documentation-in-Chinese

更易用的開發文檔

爲了給開發者更好的開發體驗,我們對超過 100 位開發者進行了訪談,並根據建議全面優化了文檔,包括重寫了 8 個產品 8 個系統平臺的 Quickstart、文檔搜索功能與搜索結果優化、重構了 31 篇高階開發指南、優化了所有產品、平臺 Token 的文檔易用性等。而且,在官方 Github 開源了所有開發文檔,讓開發者參與優化出更適合他們的文檔

行業首個 RTC 創新開發大賽

我們在 7 月 1 日,發起了業界首個圍繞 RTC 技術展開的創新開發大賽。本屆大賽共三個賽道,包括編程創新挑戰、超分辨率圖像質量挑戰和超分辨率算法性能挑戰,共有 150 餘人參加了編程創新挑戰, 760 多支隊伍參加了超分辨率的兩項挑戰賽,最後有 9 支團隊脫穎而出贏得大獎。

第五屆 RTC 實時互聯網大會

2019 年 6 月舊金山、10 月北京,兩場 RTC 大會如約舉行。在北京的第五屆 RTC2019 實時互聯網大會上,來自 W3C、搜狗、阿里巴巴達摩院、字節跳動、美團、滬江CCTalk、bilibili等團隊 40 多位技術總監、資深工程師,圍繞 AI、大前端、網絡架構、編解碼等話題分享了實踐經驗與前瞻理念。他們還與現場的數千位開發者一起度過了一個充滿知識、歡笑的程序員節。

圖:舊金山 allthingsrtc 大會

圖:北京 RTC 2019大會花絮

2014年,從硅谷一個車庫的幾行代碼開始,到2019年,我們每天爲全球開發者提供超過6億分鐘的實時音視頻技術服務。這中間,離不開所有客戶、開發者與合作伙伴的支持。未來我們將繼續探索,拓寬RTC技術的邊界。

海闊憑魚躍,天高任鳥飛。2020年,加油!

發佈了100 篇原創文章 · 獲贊 76 · 訪問量 18萬+
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章