編者按： 隨着羣雄並起，流媒體行業已然走上了內卷的快車道。如何通過更好的貼合用戶需求以增加用戶規模是各大企業當前面臨的重要課題。Tiledmedia認爲在元宇宙等概念興起的趨勢下，“創多窗”和“解壓平”是其中的關鍵答案。LiveVideoStackCon 2023 上海站邀請了來自Tiledmedia的馬高陽，爲大家介紹“創多窗”和“解壓平”的含義以及一些落地的技術實例。
大家好，我今天的分享主題爲“創多窗”和“解壓平”，它們體現了下一代流媒體多視角和全景化兩大發展方向，接下來我將具體解釋它們的含義。
![]()
“篳路藍縷，以啓山林”高度總結了Tiledmedia的創業歷程。自2017年在荷蘭成立以來，我們克服種種困難最終實現了商業版圖的擴張。
在認識到中國流媒體市場的廣闊前景後，我們來到中國以謀求進一步發展。
本次分享分爲以下幾部分：
一是介紹流媒體行業現狀，二是預展未來，三是介紹“創多窗”，四是介紹“解壓平”，五是介紹央視頻和移動雲VR的8K VR案例，最後進行簡要總結。
![]()
首先我將從企業和消費者兩個不同角度來介紹流媒體行業現狀。從企業方面來看，一是隨着流媒體市場羣雄並起，行業已經開始了內卷，各大企業試圖通過追加投入，引入獨家優質內容來維持付費用戶粘度；二是各平臺在提高流媒體服務的質量和穩定性上還面臨很多的技術挑戰，如規模化、傳輸帶寬、編解碼等等方面；三是AI、元宇宙和大數據等概念爲流媒體行業發展帶來了全新可能。
從消費者角度看，用戶的核心需求是流媒體服務的個性化，他們希望成爲自己的導播，自主決定觀看的視頻內容；其次是需要多樣化的付費機制支持，如付費訂閱免廣告或是可免費觀看，但需接受插播廣告等形式；最後是在觀看體驗上更傾向於與視頻內容以及其他觀衆發生互動。
![]()
考慮到上述行業現狀和發展趨勢，我們對未來進行了展望。
Tiledmedia多視角方案可助力用戶獲得高度個性化的流媒體服務，它支持多流同屏播放，自定義分屏佈局和各視窗的位置、大小，以及不同視窗流之間的流暢切換。
![]()
從消費者的角度看，該方案使用戶獲得了個性化、佈局定製化的互動式觀看體驗，同時藉助技術手段可以進一步實現多視角實時同步播放以及豐富社交功能。
同時該方案還引申出一種新的少干擾的廣告插入方式，流媒體平臺可將廣告以畫中畫形式與視頻內容同步播放，減少廣告插播對用戶的干擾和打斷。
![]()
從流媒體企業的角度看，該方案帶來的個性化、互動化服務有利於吸引用戶。考慮到提高成本效益，企業也較爲重視跨設備、易集成等方面的能力。
![]()
目前市場上已經有多個流媒體供應商（如YouTube、Apple TV等）提出了自己的流媒體多視角解決方案，但它們還存在一些問題。
![]()
多視角流媒體面臨的技術挑戰較多。首先，傳統方案受限於單塊屏幕有限的視窗數量，實現大數量視頻流同時上傳難度較大；第二是直播的可擴展性有限，多路高清拉流對用戶端帶寬造成了很大壓力；第三是傳統多視角流媒體方案一般僅支持固定佈局的分屏模式，靈活性有限，不能滿足用戶的個性化需求；第四是在放大切換視頻流時會出現速度慢不流暢的問題。
![]()
總體來看，多視角流媒體面臨的最大困難在於帶寬和解碼。以多路高清視頻下行爲例，單路1080P流的平均下行帶寬爲5Mbit/s，如果傳輸方案不經優化，同時傳輸6路就將超出普通WIFI或5G網絡的承載能力，勢必對用戶體驗造成不良影響。其次，多數設備使用的4K解碼器只能同時解碼4個4K流，超出4路將導致視頻無法同時播放。
![]()
我們將市場現有的幾種傳統多視角方案與Tiledmedia 多視角方案進行了對比，綜合來看，我們基於視頻切片分佈的多視角解決方案擁有全方面的良好表現。
![]()
我們的多視角解決方案支持無限數量的視頻流傳輸，首先它在雲端平臺將接收的多路視頻流轉碼爲高中低三擋不同分辨率的版本，然後將所有流封包爲統一內容項目推到CDN源站。客戶端SDK可以依據當前的視窗分佈智能分配各視窗的播放分辨率。並僅向CDN請求當前視窗需播放的對應分辨率的個別流，這極大降低了下行帶寬。該方案中技術相對複雜的視頻轉碼處理部分由我們的雲端平臺完成，僅需客戶集成我們提供的SDK即可實現。
![]()
上圖展示了Tiledmedia多視角方案多流下行的具體架構。可以看到，我們的解決方案無需同時解碼多路高清流，極大解放了解碼器能力，使超多流同屏播放得到實現。
![]()
Tiledmedia多視角方案可被無縫整合到客戶現有的業務流程中，我們的Tiledmedia Cloud負責接收、轉碼客戶上傳的視頻內容，客戶可提供CDN網絡便於視頻流的分發，並自行集成Tiledmedia Player SDK面向用戶提供多視角流媒體服務。
![]()
接下來介紹一個具體案例，我們的多視角方案被用於VR頭顯，用戶可以在頭顯建立的VR180度虛擬場景中同步觀看體育賽事的多視角巨幕畫面，並能藉助手柄自由切換視角。
![]()
接下來介紹一些可應用多視角方案的其他場景。如在賽車實況轉播中可藉助多視窗同時關注不同的駕駛員。
![]()
![]()
多視角方案可以進一步提升EPG菜單的使用體驗，用戶可以同時瀏覽目前正在播放的視頻節目並自行組織觀看內容。
![]()
![]()
![]()
![]()
在電競直播場景，可藉助多視窗從不同選手角度觀看賽事實況，便於掌握全局動態。
![]()
接下來介紹“解壓平”的概念。它指代將2D視頻3D化的過程，與元宇宙“3D版互聯網”的概念高度貼合。
![]()
我們認爲具備全景化、沉浸式體驗的VR直播是解壓平的一個良好落地場景。但VR直播當前還面臨一些技術挑戰，首先是下行VR視頻的質量可能不佳；其次是傳輸高清VR視頻對網絡帶寬的壓力較大，規模化難度高；第三是傳統方案的用戶端的社交能力不夠強，體驗的用戶互動度不高。
針對以上問題，我們提出了Tiledmedia ClearVR FOV解決方案。考慮到人眼在觀看全景VR視頻時實際只能接收到視場角（FOV）範圍內的畫面，我們將VR視頻的整體畫面切片爲不同的“神瓦”後進行轉碼，由Tiledmedia SDK判斷用戶當前FOV範圍內應該播放的神瓦。僅對FOV範圍內的畫面以高清分辨率傳輸，對FOV範圍外的畫面只傳輸低分辨率的背景，如果用戶的視角轉變過快，模糊的背景可以先作爲過渡。該方案極大降低了VR視頻的下行帶寬。
![]()
當用戶視角發生變化時，Tiledmedia SDK可以智能判斷所需的新神瓦，並請求對應的高清畫面。
![]()
Tiledmedia ClearVR FOV解決方案解放了VR視頻下行帶寬，降低了用戶端的碼率，同時變相提升了用戶端的視頻清晰度，使超高清8K VR直播、16K VR點播得以實現。
![]()
目前Tiledmedia SDK支持同時播放VR FOV和多視窗流媒體內容，構建了進化的流媒體體驗。
![]()
類似於多視角方案，ClearVR FOV解決方案同樣擁有部署簡單便捷的優勢。
![]()
接下來分享兩個ClearVR FOV解決方案具體的落地案例。一是在2022年北京冬奧會，我們的Clear VR SDK被集成到央視頻VR APP中，用戶可使用Pico Neo 3和手機觀看六類冰雪賽事合計100多小時的VR視頻內容。這些VR視頻都使用了魚眼鏡頭攝像機進行錄製，視頻角度達到180度，清晰度達到8K 60fps，質量屬行業首創水準。
除了央視頻，我們也和國外平臺達成了冬奧會高清直播的業務合作。
![]()
在冬奧會的直播業務中，ClearVR FOV方案僅部署了一套轉碼器，有效控制了成本。
爲了優化體驗我們還採用了ABR技術，針對網絡環境選用適合的碼率傳輸，提升觀看體驗。
最後，VR直播作爲一種新的觀賽途徑，本次收穫了很多用戶和他們的好評。
![]()
第二個案例是我們與移動雲VR達成合作，助力咪咕公司打造高清8K VR體育和娛樂直播體驗。藉助ClearVR FOV 技術，移動雲VR在實現籃球、乒乓球、UFC等多IP 8K清晰度直播的同時降低了大約75%的帶寬。咪咕公司成熟的機位設置經驗也爲用戶帶來了最佳臨場感。
![]()
移動雲VR將高質量的VR直播服務作爲自身的盈利點，並已準備提供進一步的12K ClearVR FOV點播服務。針對籃球等賽事場景，爲了增強臨場感還會進一步優化UI，藉助180度沉浸視頻營造真實的3D環境。在設備支持方面，除了目前的PICO 4、NEO 3頭顯外，未來還將引入手機、Nolo和YVR頭顯等更多種類的拓展。
![]()
接下來進行一個簡單總結，爲了滿足消費者個性化和便利化需求，“創多窗”和“解壓平”是當前行業發展的兩大趨勢，而Tiledmedia技術目前已經可以幫助其他流媒體企業實現它們的落地。最後的關鍵只是他們成爲主流的時間問題。
![]()
▲掃描圖中二維碼或點擊“閱讀原文” ▲
直通LiveVideoStackCon 2023深圳站 9折購票通道
本文分享自微信公衆號 - LiveVideoStack（livevideostack）。
如有侵權，請聯繫 [email protected] 刪除。
本文參與“OSC源創計劃”，歡迎正在閱讀的你也加入，一起分享。
