Zoom支持自動生成字幕;SharePlay上線;Safari 更新導致大量bug |WebRTC風向

 

 

Zoom支持自動生成字幕

Zoom正面臨着很激勵的競爭,前一段時間開始做RTC的PaaS服務, 以147億美元收購five9,但最後以失敗而告終。Zoom也在不斷迭代提升其產品的粘性,最近自動生成字幕能力現在可用於所有免費的Zoom會議賬號,目前只支持英文,後續會支持其他的語言。

以後我們在和外國人開會就再也不怕蹩腳的英文了。

自動生成的字幕可以在 Zoom 視頻會議或網絡研討會上自動提供發言人字幕。若要啓用該功能,需要訪問 Zoom 網絡門戶。與會者仍可以私下要求會議主持人在會議期間使用會議工具欄啓用現場轉錄。並且Zoom 還支持手動字幕以及跟第三方字幕服務的整合。

所以,騰訊會議什麼時候支持上這個功能呢?

相關鏈接: https://www.cnbeta.com/articles/tech/1194821.htm

 

SharePlay上線

10月26日,Apple 推送了iOS 15.1 正式版。本次更新修復了iOS 15.0 中無法通過Apple Watch解鎖iPhone的 bug,同時還正式上線了 FaceTime 同播共享(SharePlay),併爲 iPhone 13 Pro 系列機型帶來了 Apple ProRes 視頻拍攝功能。

同播共享(SharePlay)可以讓用戶在進行FaceTime通話時,和對方同步觀看視頻,聽音樂,共享屏幕。

蘋果利用自己生態的優勢來提升自己產品的粘性,目前已經看到一些小遊戲在嘗試使用SharePlay,相信後面基於SharePlay 越來越多的創新玩法會湧現。

Android平臺目前還沒有類似的玩法和生態系統,不知後續是否會進行更新。但不妨礙第三方公司會推出類似玩法和跨平臺的方案的體驗,但SharePlay利用了蘋果特有的權限,第三方的實現可能很難達到類似的跨平臺的體驗。

目前可以看到體驗共享方向的產品越來越多,比如 K歌體驗共享:線下K歌可以與朋友對唱,及時聽到好友演唱, 在超低延遲的加持下 ,線上K歌可以連麥,獲得無感知延遲的合唱體驗。聽歌體驗共享:“一起聽”是在線聽歌中的新的休閒娛樂模式,讓聽歌和社交互動完美結合。當兩個陌生人配對成功並“一起聽”, 還可以進行實時的語音視頻以及其他的互動玩法。觀影體驗共享:和一起觀影的人討論電影可以增加觀影樂趣,新技術驅動下,在線上觀影場景中,逐漸產生了更多的共享體驗模式。

同時也不難想象,未來會有更多類似體驗共享的應用通過同播共享給自己的APP加入一些新的有創意功能的團隊,這一功能的未來也是無可限量。

相關鏈接1: https://36kr.com/p/1452080810256521

相關鏈接2: https://36kr.com/p/1457374160955264

 

Safari 更新導致大量bug

在iOS 15.0 Safari的更新中,增加了很多WebRTC相關的特性,比如Insertable stream的支持,可以用來端到端加密,屏幕共享、HTTP3.0的支持,甚至支持在瀏覽器中跟facetime互通。但同時也出現了很多bug,對WebRTC影響比較大的是,iOS15.1系統在使用WebRTC推流的時候會導致crash, iOS 15.0的safari中websocket如果在服務端開啓了壓縮,會導致連不上。

 

WebRTC 要實現SVC了

其實WebRTC很早就支持了vp9的SVC, 但一直只能通過命令行開啓,並不能默認打開。後來SVC成爲WebRTC 1.0 API的擴展規範, 現在可實現完備的SVC支持。SVC在視頻會議場景中很受用,但也帶來了不少問題,比如在移動端開啓了SVC後,可能就要放棄硬件編碼, 一個很美好的技術到真正落地的時候總會帶着很多遺憾和取捨。

諮詢了Intel 給Chrome做硬件編解碼支持的專家後,瞭解到這次SVC的實現並不是那麼的完美:

“其實是給av1用的 vp9還不理睬這個api 264只會支持L1T2和L1T3。然而av1的硬件編碼我只在windows上加了支持,且只會以後支持L1T2和L1T3。除非你只用軟件編碼”

現在讓我們靜靜等待SVC, 有總好過沒有。

相關鏈接:

https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ

 

兩年後 Skype Web版本現在也能在Firefox上使用了

2020年,由於COVID-19的流行,線上視頻會議這一溝通方式開始意外走紅,微軟也跳上了這一行列,這並不奇怪。Skype 作爲VOIP鼻祖級別的公司,被微軟收購之後反而走向了下坡路,很多人可能已經忘記了Skype。微軟的Teams推出之後, 由於跟Office 套件的捆綁策略迅速搶佔了大量的企業辦公協同市場, 就在人們以爲微軟會放棄Skype之後, Skype終於讓他的web版本,支持了firefox。

前一段時間甚至傳出微軟會重新定位Skype, 主打年輕人。那對於Skype爲什麼要支持web端,就像是蘋果終於讓FaceTime支持web端大概思路是一樣, 雖然Web中WebRTC的體驗沒法跟native的體驗相比,但Web所具有的一大優勢就是不用下載,人人往往低估了這一優勢, 個人的看法是當web端的功能或者體驗能達到native 的70%的時候,人們會積極的擁抱Web的版本。

相關鏈接:https://www.cnbeta.com/articles/tech/1194519.htm

 

Edge瀏覽器將支持GeForce Now服務

自從微軟將Edge從其自制的EdgeHTML引擎切換到Chromium之後,對WebRTC的支持越來越好, 最近Edge瀏覽器將支持GeForce Now服務, XBox玩家可以把他們的PC遊戲通過Edge瀏覽器串流到主機遊戲上玩, 看起來這是一個基於WebRTC的局域網雲遊戲,好奇他們在局域網下基於WebRTC的雲遊戲可以做到端到端多少毫秒的延遲。

值得一提的是,今年9月的Edge瀏覽器更新,還添加了對另外一個雲服務——谷歌Stadia的支持,允許玩家在Xbox主機上使用Edge瀏覽器在谷歌Stadia上玩遊戲。

持續關注雲遊戲的發展。

相關鏈接:https://hot.cnbeta.com/articles/game/1194311.htm

 

 

References

[1] https://www.cnbeta.com/articles/tech/1194519.htm: https://www.cnbeta.com/articles/tech/1194519.htm [2] https://hot.cnbeta.com/articles/game/1194311.htm: https://hot.cnbeta.com/articles/game/1194311.htm [3] https://36kr.com/p/1452080810256521: https://36kr.com/p/1452080810256521 [4] https://36kr.com/p/1457374160955264: https://36kr.com/p/1457374160955264 [5] https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ: https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ [6] https://www.cnbeta.com/articles/tech/1194821.htm: https://www.cnbeta.com/articles/tech/1194821.htm

 

 

 歡迎點擊一鍵訂閱《雲薦大咖》專欄,獲取更多精品內容。

看雲端技術起落,聽大咖指點迷津。

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章