Zoom支援自動生成字幕;SharePlay上線;Safari 更新導致大量bug |WebRTC風向
Zoom支援自動生成字幕
Zoom正面臨著很激勵的競爭,前一段時間開始做RTC的PaaS服務, 以147億美元收購five9,但最後以失敗而告終。Zoom也在不斷迭代提升其產品的粘性,最近自動生成字幕能力現在可用於所有免費的Zoom會議賬號,目前只支援英文,後續會支援其他的語言。
以後我們在和外國人開會就再也不怕蹩腳的英文了。
自動生成的字幕可以在 Zoom 視訊會議或網路研討會上自動提供發言人字幕。若要啟用該功能,需要訪問 Zoom 網路門戶。與會者仍可以私下要求會議主持人在會議期間使用會議工具欄啟用現場轉錄。並且Zoom 還支援手動字幕以及跟第三方字幕服務的整合。
所以,騰訊會議什麼時候支援上這個功能呢?
相關連結: https://www.cnbeta.com/articles/tech/1194821.htm
SharePlay上線
10月26日,Apple 推送了iOS 15.1 正式版。本次更新修復了iOS 15.0 中無法通過Apple Watch解鎖iPhone的 bug,同時還正式上線了 FaceTime 同播共享(SharePlay),併為 iPhone 13 Pro 系列機型帶來了 Apple ProRes 視訊拍攝功能。
同播共享(SharePlay)可以讓使用者在進行FaceTime通話時,和對方同步觀看視訊,聽音樂,共享螢幕。
蘋果利用自己生態的優勢來提升自己產品的粘性,目前已經看到一些小遊戲在嘗試使用SharePlay,相信後面基於SharePlay 越來越多的創新玩法會湧現。
Android平臺目前還沒有類似的玩法和生態系統,不知後續是否會進行更新。但不妨礙第三方公司會推出類似玩法和跨平臺的方案的體驗,但SharePlay利用了蘋果特有的許可權,第三方的實現可能很難達到類似的跨平臺的體驗。
目前可以看到體驗共享方向的產品越來越多,比如 K歌體驗共享:線下K歌可以與朋友對唱,及時聽到好友演唱, 在超低延遲的加持下 ,線上K歌可以連麥,獲得無感知延遲的合唱體驗。聽歌體驗共享:“一起聽”是線上聽歌中的新的休閒娛樂模式,讓聽歌和社互動動完美結合。當兩個陌生人配對成功並“一起聽”, 還可以進行實時的語音視訊以及其他的互動玩法。觀影體驗共享:和一起觀影的人討論電影可以增加觀影樂趣,新技術驅動下,在線上觀影場景中,逐漸產生了更多的共享體驗模式。
同時也不難想象,未來會有更多類似體驗共享的應用通過同播共享給自己的APP加入一些新的有創意功能的團隊,這一功能的未來也是無可限量。
相關連結1:https://36kr.com/p/1452080810256521
相關連結2:https://36kr.com/p/1457374160955264
Safari 更新導致大量bug
在iOS 15.0 Safari的更新中,增加了很多WebRTC相關的特性,比如Insertable stream的支援,可以用來端到端加密,螢幕共享、HTTP3.0的支援,甚至支援在瀏覽器中跟facetime互通。但同時也出現了很多bug,對WebRTC影響比較大的是,iOS15.1系統在使用WebRTC推流的時候會導致crash, iOS 15.0的safari中websocket如果在服務端開啟了壓縮,會導致連不上。
WebRTC 要實現SVC了
其實WebRTC很早就支援了vp9的SVC, 但一直只能通過命令列開啟,並不能預設開啟。後來SVC成為WebRTC 1.0 API的擴充套件規範, 現在可實現完備的SVC支援。SVC在視訊會議場景中很受用,但也帶來了不少問題,比如在移動端開啟了SVC後,可能就要放棄硬體編碼, 一個很美好的技術到真正落地的時候總會帶著很多遺憾和取捨。
諮詢了Intel 給Chrome做硬體編解碼支援的專家後,瞭解到這次SVC的實現並不是那麼的完美:
“其實是給av1用的 vp9還不理睬這個api 264只會支援L1T2和L1T3。然而av1的硬體編碼我只在windows上加了支援,且只會以後支援L1T2和L1T3。除非你只用軟體編碼”
現在讓我們靜靜等待SVC, 有總好過沒有。
相關連結:
https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ
兩年後 Skype Web版本現在也能在Firefox上使用了
2020年,由於COVID-19的流行,線上視訊會議這一溝通方式開始意外走紅,微軟也跳上了這一行列,這並不奇怪。Skype 作為VOIP鼻祖級別的公司,被微軟收購之後反而走向了下坡路,很多人可能已經忘記了Skype。微軟的Teams推出之後, 由於跟Office 套件的捆綁策略迅速搶佔了大量的企業辦公協同市場, 就在人們以為微軟會放棄Skype之後, Skype終於讓他的web版本,支援了firefox。
前一段時間甚至傳出微軟會重新定位Skype, 主打年輕人。那對於Skype為什麼要支援web端,就像是蘋果終於讓FaceTime支援web端大概思路是一樣, 雖然Web中WebRTC的體驗沒法跟native的體驗相比,但Web所具有的一大優勢就是不用下載,人人往往低估了這一優勢, 個人的看法是當web端的功能或者體驗能達到native 的70%的時候,人們會積極的擁抱Web的版本。
相關連結:https://www.cnbeta.com/articles/tech/1194519.htm
Edge瀏覽器將支援GeForce Now服務
自從微軟將Edge從其自制的EdgeHTML引擎切換到Chromium之後,對WebRTC的支援越來越好, 最近Edge瀏覽器將支援GeForce Now服務, XBox玩家可以把他們的PC遊戲通過Edge瀏覽器串流到主機遊戲上玩, 看起來這是一個基於WebRTC的區域網雲遊戲,好奇他們在區域網下基於WebRTC的雲遊戲可以做到端到端多少毫秒的延遲。
值得一提的是,今年9月的Edge瀏覽器更新,還添加了對另外一個雲服務——谷歌Stadia的支援,允許玩家在Xbox主機上使用Edge瀏覽器在谷歌Stadia上玩遊戲。
持續關注雲遊戲的發展。
相關連結:https://hot.cnbeta.com/articles/game/1194311.htm
References
[1]https://www.cnbeta.com/articles/tech/1194519.htm:https://www.cnbeta.com/articles/tech/1194519.htm [2]https://hot.cnbeta.com/articles/game/1194311.htm:https://hot.cnbeta.com/articles/game/1194311.htm [3]https://36kr.com/p/1452080810256521:https://36kr.com/p/1452080810256521 [4]https://36kr.com/p/1457374160955264:https://36kr.com/p/1457374160955264 [5]https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ:https://groups.google.com/a/chromium.org/g/blink-dev/c/XzygOFuas2A/m/imTtbDqPBgAJ [6]https://www.cnbeta.com/articles/tech/1194821.htm:https://www.cnbeta.com/articles/tech/1194821.htm
歡迎點選一鍵訂閱《雲薦大咖》專欄,獲取更多精品內容。
看雲端技術起落,聽大咖指點迷津。
海量技術實踐經驗,盡在雲加社群! https://cloud.tencent.com/developer