隨着實時通信技術的發展，在線教育、視頻會議、在線金融等實時互動應用的使用量越來越多，通過線上共享文檔和桌面進行教學、協作、產品演示也日益普遍。多樣化的場景也催生了對實時互動技術更個性化的需求，其中就包括基於實時視頻、屏幕共享、文檔內容流的實時標註功能，可以解決多個行業在線上複雜交互場景下的痛點，更好地提升線上互動的效率和效果。
實時標註的應用場景
線上少兒編程課堂在產品交互上的要求很高，除了要滿足老師和學生能夠彼此視頻聊天、共享課件以外，還需要實時同步老師和學生之間大量複雜的編程操作環節。在整個過程中，老師需要對共享的編程內容進行重點、難點的標註，也需要及時指出學生的實際操作中錯誤的地方。如何實現強互動的編程操作課堂、打造更好的編程學習體驗，成爲了教育科技公司的難題。
目前市面上的實時通信雲服務中，僅僅提供了基礎的音視頻通話和屏幕共享能力，在屏幕共享或視頻通話的過程中，沒有辦法對內容進行實時標註，無法滿足更貼合少兒編程場景的互動需求。針對這一痛點，拍樂雲Pano 推出業內首個 “實時標註” 功能，給出了很好的解決方案。
實時標註讓理財講解更聚焦：當銀行理財經理或視頻客服通過屏幕共享給客戶進行在線產品演示時，會對一些重點信息做實時標註，比如收益率、產品特點、操作步驟等，這種在線的高效講解更夠提升人員效率和服務體驗。
實時標註讓美術教學更細緻：在線上美術課堂中，美術老師可以直接在設備屏幕上對學生繪畫內容進行標註，提出細節上的改進建議。通過實時標註技術可以增進師生的互動性，爲在線美術教育機構打造更好的用戶體驗。
實時標註讓會議協同更高效：當一羣人通過會議軟件進行在線頭腦風暴時，發言人通過共享PPT文檔來引導討論。過程中發言人和其他參與人都可以快速表達自己的觀點，並通過終端設備對討論材料進行實時標註，同步給所有人。
實時標註的技術難點
標註層和內容層是不同的兩層，用戶使用的時候， 會同時需要標註和操作內容層，所以在設計上就需要用戶操作可以自如地在標註層和內容層之間切換。
內容層的大小、位置、縮放比例等可能會隨時發生變化，爲保證標註和內容的一致，內容層的所有變化必須被實時偵測，並且自適應調整標註層。
PC端、iOS端、Android端的屏幕大小和比例各有不同，通常UI設計上也會有不同的layout，所以標註層需要針對不同的layout自動適配。
拍樂雲實時標註方案優勢
拍樂雲提供簡單易用的實時標註接口，可滿足用戶開發基於實時視頻和實時共享場景的內容標註需要，已支持Windows端、Mac端、iOS端和Android端。開發者只需要傳入對應視頻或共享流的標識信息，對應窗口信息，設置標註工具和有關屬性既可快速開啓實時標註。
2、超低時延，極致壓縮
基於拍樂雲自研白板引擎，標註信息可實現毫秒級實時同步，弱網環境下依然流暢，提供極致互動體驗。基於白板的數據特性，採用自定義的高效數據壓縮算法，也可大大節省傳輸流量。
3、支持雲端錄製，保障數據安全
可同步錄製實時互動過程中的音視頻通話、屏幕共享、互動白板和實時標註數據，用戶可根據自身需要選擇錄製方式，滿足課程回放、客服質檢等應用需求。同時，採用加密通道傳輸，確保所有數據的安全性和完整性，打造真正可靠的互動通信服務。
4、更多能力的互動白板服務
除了基於實時視頻通話和屏幕共享的實時標註外，拍樂雲還提供完整的互動白板產品，支持多通道軌跡同步、文檔轉碼共享、動效課件、多種教具切換、多樣化工具欄、獨立多白板、激光筆和視角跟隨等多個能力，適用於教學、協同、娛樂等場景。
目前，拍樂雲已提供實時標註SDK，支持Windows端、Mac端、iOS端和Android端。爲開發者提供便捷的接入方式，可快速上線標註功能滿足業務需求。如需集成和體驗Demo，請諮詢官網客服，獲取響應技術文檔。在開發過程中遇到的任何問題，我們將提供技術支持服務，隨時隨地敏捷響應。關注拍樂雲Pano的公衆號，我們將爲大家分享更多關於音視頻技術的探索和實踐，以及基於 Pano SDK 的詳細開發教程。
關於拍樂雲
拍樂雲成立於2019年，是國內第一家視頻會議背景的實時互動通信雲服務提供商，匯聚了一大批專注於音頻、視頻、白板、網絡、AI等領域的資深技術專家。通過 Pano SDK，企業開發者即可在全球範圍內快速實現互動小班、超級小班、雙師大班、語音聊天室、視頻社交、直播連麥、遊戲語音、視頻客服、遠程醫療、辦公協作等場景。
相關推薦
本文分享自微信公衆號 - 音視頻開發進階（glumes_blog）。
如有侵權，請聯繫 [email protected] 刪除。
本文參與“OSC源創計劃”，歡迎正在閱讀的你也加入，一起分享。