在疫情需求推動下,RTE行業快速發展,RTE場景也在加速成熟和爆發。RTE2021實時互聯網大會上,聲網Agora創始人兼CEO趙斌在《萬象紛呈,實時進化》的主題演講中宣布,聲網重磅發布基于實時互動場景的“RTE萬象圖譜”,覆蓋教育、泛娛樂、IoT、金融、醫療、企業協作、數字政府、智慧城市等20+行業賽道,200+場景。為實時互動領域的開發者挖掘場景,實現產品和技術創新提供更多可能。
“我們將全球處在萌芽階段的場景全部梳理出來,希望給開發者和創業者更多靈感和視角,我們希望和創新者一起去打磨、探索這些場景中真正的價值和創新點。”趙斌表示。
2015年,只有少數像Skype的專業應用才會使用包含實時音視頻的技術模塊,來實現功能。“第一屆實時互聯網大會上,我們非常憧憬地預測,未來三五年,應用商店里將有20%-30%的應用使用實時音視頻技術模塊,并產生相應的使用場景。”經過7年的時間,今天行業的發展也已超出當時的預期,趙斌稱,“根據對國內幾大應用商店在教育、泛娛樂、購物、金融、醫療、企業通訊等行業的近萬個應用進行統計,2021年實時音視頻滲透率已突破30%。”
趙斌認為,RTE的應用和技術能力正成為5G下的殺手锏應用,未來,很可能在幾年時間里,實時音視頻技術的滲透率將會在關鍵行業超過50%。
以下為演講全文:
大家好!歡迎大家來到RTE2021實時互聯網大會現場,由于疫情限制,今年現場人數有限,我們不得不請很多已經報名的嘉賓在線上參加,希望現場和線上的朋友們能夠在兩天時間里歡聚一堂、共襄盛舉,一起交流、探討和促進行業的發展,豐富與便利人們的線上工作和生活。
RTE行業2021年度大事件
過去一年,RTE行業在疫情需求推動下快速發展,也發生了很多有重要意義和深遠影響的事件,在這里我們先回顧一下。
個人認為,過去一年最具歷史意義的是RTE行業標準的正式化。2021年1月26日,W3C和IETF同時宣布WebRTC成為正式標準。作為標志,這意味著實時音視頻將被帶入Web的任何地方,為WebRTC第一代技術的標準化進程劃上了完美句號;同時,也意味著對下一代WebRTC技術、行業、標準進化等方面的探討將正式提上議事日程。
疫情仍然影響著全球很多國家常態的工作和生活形態。很多企業原本預期在2021年下半年回到辦公室工作,但進入夏季后,Facebook、Amazon、Google等各大公司紛紛宣布推遲返回辦公室的時間。這一定程度上將實時互動遠程辦公場景模式進一步普及。
在中國市場,健身行業被實時互動的技術形態和能力深深地沖擊和改造。過去一年的“千鏡大戰”,使得在美國市場出現Peloton產品形態以后,中國消費者也開始形成利用RTE和智能設備進行線上健身的習慣。
過去一年,直播已成為電商行業基本使用形態及增量核心,直播帶貨已達到全行業規模化的占比,影響力不容小覷。但電商直播的擴張和體驗進化并未達到終點,未來將進一步拉近購物者、產品發行者、銷售者之間的關系,也將進一步為人們的購物,提供更高的便利性、多元易用性和使用價值。
還有一個無法忽視的事件,就是LiveAudioCast(互動播客)場景的爆發,伊隆馬斯克、馬克扎克伯格等科技名人的參與直接引爆了這種媒體互動形式在整個社會的傳播和關注。與Twitter和微博的形態相比,LiveAudioCast在降低仰視感的基礎上進一步通過更自然、直接、真實的實時語音交流拉近名人、意見領袖和所有社會參與者之間的距離感,從而創造了爆發式吸引力,也驗證了實時音視頻互動能力對于引爆新媒體形態、改造社會交流形式的巨大潛力。
過去十二個月,工程師和科學家在低延時技術方面進一步優化,解鎖了新場景。在線唱歌無論在疫情前后都非常受歡迎,但當進行實時合唱時,體驗受延時指標影響較大。200毫秒延時下就可以明顯感覺到合唱雙方字句之間的不同步,這樣會使線上一起唱歌的樂趣大打折扣。今年我們將延時降到64毫秒之后,實時合唱場景在很多社交泛娛樂應用引中起了用戶和玩家的興趣,有巨大的成長機會。
互聯網+實時互動能力的組合在災難性事件的緊急情況下產生了獨特作用。今年暴雨災害中,鄭州城市交通一定程度上癱瘓,切斷了直播車等設備開赴現場的可能,4G、5G普及讓RTE直播技術成為遠程報道在這種情況下的首選工具。
暴雨和災害對移動基礎設施的損壞也造成了移動網絡信號的劇烈衰減和波動,讓實況報道的采集和回傳面臨極大挑戰。我們通過和合作伙伴TVU合作為鄭州電視臺提供暴雨災情下救援情況的實況覆蓋,讓大家在擔心的同時能更直接地了解一線情況。未來,這種組合能力也將更靈活地覆蓋更多場景。
這一年,還不得不提實時互動在XR方面取得的顯著進展。Quest2的推出和隨后的銷量暴漲超出了很多人預期,五個半月的銷量已超過歷史上所有OculusVR頭顯的總和,聽說甚至超過千萬出貨量,這種規模已超出了我們在往屆大會提到的VR行業對一個健康和繁榮生態形成的規模效應的閾值,這樣的出貨量預兆著XR/VR行業的應用以及生態正在爆發前夜。
RTE行業的互動價值是在各種多元場景下體現出來的,這種場景下的實際音視頻體驗以及伴隨體驗的質量評估和測試遠遠超出傳統意義上單一信息交換場景的質量評估,需要具有專業的方法以及實驗的設施。
很高興地和大家宣布,聲網的工程師和科學家們在過去一年里努力工作,創造了全球第一個全自動多場景模擬聲學實驗室,它的出現代表著RTE行業在多場景的實時互動下第一個專業的測試設施和測試環境的建設已成功投產,將為未來多場景下的音頻和音效的研究、測試、評估帶來新的高度和效益上的便利。
同期,我們還建設了行業里第一座負本底噪聲聲學實驗室,為聲學信號的深入研究提升了新高度,我們做到本底噪聲-1dBA,也是行業里前所未有的。這些實驗室不光會用于我們自身的音頻和聲音信號的測試,也具備了為行業里硬件和軟件合作伙伴提供認證測試的能力。
XR的成長和火爆可能會讓很多人想到,過去一年 Metaverse(元宇宙)的概念得到了巨大普及,實際上這種概念在很多科技愛好者和未來主義者人群中并不是陌生概念,但直到Roblox上市才成為一個引爆的概念。
Facebook創始人小扎在7月的采訪中公開宣布,Facebook這樣一個巨量的頭部科技企業將在五年內轉型為元宇宙公司,這樣的聲明非常震撼,不得不引起全社會、全行業的關注。Metaverse到底有多大的潛力,為什么對一個巨頭來說五年內就要全公司轉型?這背后預示著一種很大的潛力,微軟CEO也曾在前一段時間的采訪中提到,微軟也會致力于企業元宇宙概念的建設和成長。所以,“元宇宙一定是未來的趨勢和發展方向”在一定程度上變成了行業共識。
“雙減”政策在中國的落地改變了在線互聯網教育行業的生態格局,“雙減”落地后,整個在線互聯網教育行業在向成人教育、以科技為代表的素質教育以及教育出海等業務方向轉移,線上課堂形式雖然在一定時間內受到“雙減”影響,但整體的方向性和應用性的創新并沒有停歇,并且在長周期的未來,我們依然看好線上教育給商業以及社會價值帶來的貢獻。
過去十二個月,在數據安全和隱私保護方面全球的立法節奏也緊鑼密鼓,中美兩大國都進一步推出了國家級法律。中國在今年9月和11月各有一部相關法律生效,美國在今年7月剛剛推出了聯邦級別的《統一個人數據隱私保護法》,這超出了過去美國加州的隱私保護范疇,實施和適用于整個國家范圍。這些法律的制定也代表著個人數據隱私保護以及安全保障成為了整個互聯網行業,尤其是實時互動行業基本的核心要求。隨著這些法律的成熟和發布,將會全面覆蓋所有的應用和使用場景。
行業洞察:RTE正成為5G下的殺手锏應用
以上是我們看到過去十二個月在行業里發生具有深遠影響的事件,事件背后反映出行業在加速發展,也帶來了行業更深刻的變遷。
今天實時音視頻領域的發展和2015年第一屆實時互聯網大會上討論的未來相比,已超出預期。
2015年,只有少數像Skype這樣的專業應用才會使用包含實時音視頻的技術模塊,來實現功能。我們當時非常憧憬地預測,未來三五年,應用商店里將有20%-30%的應用使用實時音視頻技術模塊,并產生相應的使用場景。今天,根據對國內幾大應用商店在教育、泛娛樂、購物、金融、醫療、企業通訊等行業的近萬個應用進行統計,2021年實時音視頻滲透率已突破30%,超出當時的預期。
在此情境下,實時互動行業也已成長為真正被認可和重視的全球性行業,如果在Github上搜索WebRTC項目,已超過2.1萬個,短短十年,這種使用的繁榮和項目創建的規模大大超過了很多開發者的預期,確實非常鼓舞人心。
聲網平臺上,每月有上萬個新的開發者注冊的應用,跟七年前第一屆大會上我們預測的少數應用場景相比,有幾十倍擴張。今天我們看到有規模用量的使用場景已超過了200個。對比今年3月和8月,開發者在聲網平臺上活躍注冊場景的應用數量,在電商直播、企業協作、游戲+直播等領域里都出現了非常多倍的增長,說明開發者和行業客戶對這些領域新應用的探索熱情仍在加速。
回顧過去幾年移動互聯網產業環境的發展,可以意識到,RTE的應用和技術能力正成為5G下的殺手锏應用,當我們回顧從2G到5G各個歷史階段,至少在中國5G已經成為RTE應用的基礎網絡連接形態,反過來也證明在5G下RTE應用是一個關鍵和重要的使用場景。
在和客戶共同創新、打磨服務的過程中,雙方對技術專業性、技術指標與業務相關性的挖掘讓我們發現很多對業務產生影響的震撼事實。
我們在和一個秀場直播客戶合作中發現,實時互動卡頓率下降22%時,秀場觀眾的日平均使用時長增加30%。這種比例的影響是超出想象的,如果大家沒有關注到這種隱形影響,會錯失很多發展和成長的機會。
另外一個秀場直播應用,當視頻分辨率從SD升級到HD時,月平均收入增加了10%,這種場景體驗的優化,類似電視從標清進化到高清,但電視行業的進化是特別慢的,互聯網行業可以在一夜間把應用升級到高清體驗,這種體驗的升級自然會帶來沉浸感的加深,對直播月收入的增加就不意外了。
我們還和教育客戶深度打磨大班課場景下的互動體驗,通過延時的降低、卡頓率的保持,甚至是比CDN的優化,發現當大班課變成互動性更強的RTC超級小班課時,轉化率能提升25%以上,這是因為學生注意力的管理和注意力加強下的學習效果,會帶來學生對課程價值的認可、家長對課程效果滿意度的提升,這種轉化率提升在教育行業是不可忽視的。
同時,我們也看到更多互動場景持續創新,并且在進一步改造各個行業。
一是實時合唱場景。當在線下KTV和朋友合唱的各種場景都變成線上時,行業對產品方案的完備性提出了更高要求,例如包括歌曲版權、KTV場景的完整解決方案、各種功能的全系列實現以及一站式交付能力,帶來了社交泛娛樂行業新玩法的爆發式成長。
比如游戲場景,我們看到非常多游戲和直播的融合,由主播在游戲背景下,圍繞游戲相關話題進行直播互動和點評,可以給玩家帶來更進一步、更友好的融合體驗,這樣的創新只是一個開始,類似的場景融合和體驗交叉很可能將會持續在各個行業發生,并且帶來新的體驗和增長動力。
再比如一個更專業的,設計行業的工作場景。在原本設計協作工具的基礎上,加上RTE技術能力,讓設計師無論跟同事還是客戶之間的交流,都能在線上平順、高效地發生。這種能力的進一步普及和質量改善,會創造更多細分場景和應用的成長機會,凡是在企業服務方向有所追求的開發者和客戶,都可以關注這方面的細分需求。
技術的進展正在扎扎實實地解鎖更多場景。最近我們將千人視頻連麥能力開放給一些戰略合作伙伴的,觀眾在這種場景下可以有選擇地去看任意組合的千人視頻子集,更有效地解鎖線上展會、元宇宙、云演唱會等場景,觀眾之間的互動帶來的現場感,這種能力在過去是不具備的。
同時,我們還實現了一個SDK拉通從超低延遲的實時互動,到低延遲,再到延遲稍大但比CDN更低,再到CDN普及和標準化的能力,實現所有延遲等級的打通和靈活切換,這為開發者創造豐富的直播體驗,并管理運營成本創造了很好的機會。
技術性能的優化和提升也進一步釋放了AI在實時場景下應用的空間,去年我們提到的AgoraAI 高性能推理引擎進一步改進,已能夠在千元機設備上開啟各類AI玩法,這讓很多擔心AI算法復雜度過高,無法在消費者設備上有效和高質量地運行的開發者,解除這方面的擔憂。
行業進化也會帶來對專業性和標準化的進一步要求,對應用APP來說,RTE SDK就相當于電子設備中的芯片,SDK技術質量會直接影響到整個應用和設備的質量。
聲網作為在行業中經營和技術投入多年的企業,很高興地和大家分享,友盟發布的崩潰率行業標準水平是0.4%,我們的指標是0.004%,已經達到行業平均水平的千分之一。有時應用雖然沒有崩潰,但會卡死沒有反應。我們的SDK在卡死率方面的指標也達到了平均水平十分之一的級別,如果沒有這樣的質量保障,APP開發者很難對應用的質量有足夠樂觀的信心,從而為APP質量改進打下好基礎。
對安全合規的要求在日趨嚴格,如果平時沒有關注,可能會低估了其要求的完備性和細致性。我們的安全合規團隊,對中國市場上各種法律法規進行分析和總結,無論是法律、部門規章、還是國家標準和司法解釋級別都有豐富詳實的內容。如果不知道這些內容,很難保證不會在未來的監管和合規改造、行業進化、政府推動中被影響到。
過去短短幾個月,數據隱私和數據安全已成為全民關注的重大事件,對行業的影響達到了前所未有的高度,很多公司因此甚至無法上市,或是停止融資進程。尤其是當業務已經做到一定程度的時候,希望開發者和客戶真正關注到這一點,不要低估其影響和沖擊。
2018年前后,我們投入了巨大的力量建設了近二十人的團隊,形成了全品類全球范圍的普遍認證。不僅如此,我們也建立了和全球主流領導性的安全合規合作伙伴的深度合作,包括權威標準認證機構DNV·GL,以及美國市場非常有領導力地位的安全認證廠家BISHOPFOX等等,這些合作進一步加強了我們自己和客戶、開發者的信心,讓安全合規的標準達到甚至超出業界一流水平,為所有開發者的應用進軍全球市場保駕護航。
RTE行業趨勢展望:實時音視頻滲透率將突破50%
如果放眼未來,會有哪些激動人心的進展呢?我們對未來趨勢的預測也有幾個關鍵詞:
首先是孿生。數字化轉型的趨勢和潮流經常被提及,但我們想重點強調,真正的數字化普及后,互動是不可缺少的環節。當數字化普及并與互動結合,就會創造豐富的場景,這就是我們看到無論是應用使用量、滲透率提高,還是場景爆發的根本原因。
無論在辦公、公眾服務還是企業業務經營方面,都持續有創新場景出現,這些場景提升了企業效率,提供了疫情下的支持,也代表著未來巨大的機會,數字化轉型正在變成現實。
另一個關鍵詞是融合,當數字化場景進入新時代,線上線下體驗的融合將會發生更深刻進化。首先是互動虛實結合,虛擬人物和真實人物擊掌互動;其次是感官虛實結合,人的形象的改造和優化創造了各種可能性,我既可以是虛擬形象章小墨,也可以是一個會說話的大熊貓;第三是數據的虛實融合,數據的準確性、真實性和實時性會讓人分不清到底來自真實人物和物體還是虛擬形象;最后是場景的虛實融合,可以想像未來的工作場景,既可以顯示數據和資料的實體物理顯示屏,也可以通過VR眼鏡或其他全息設備,在物理空間有一個虛擬數據展示或者3D設計模型,更直觀地進行操控、改造和優化。
最后一個關鍵詞是進化。技術能力和設備的進化在持續解鎖場景,環境的變化不是某個企業創造的,而是整個產業甚至多個科技產業共同創造的效果。
人和世界互動的界面在進化。穿衣鏡、冰箱、抽油煙機都戴上了語音模組和視覺模組,可以進行實時交互。在不遠的將來,你每天可以通過數據化的方式,而不是在物理世界中挑選服裝,根據日程指導你今天的妝容和穿著;當你在廚房做飯,懷念家鄉的味道,可以直接連線你的家人,指導如何做一道菜,而不需要拿起手機打電話。這些場景釋放了人機交互界面的普及度和數字化無處不在的特性,提供了隨時隨地以海量數據(603138,股吧)為支撐的沉浸體驗。
實時互動的邊界也在進化。實時互動網絡保障在這個時代得到了進一步擴張,將會超出音視頻和實時互動場景下的實時保障,為高價值的APP和APP下面高價值的使用操作提供實時響應的保障能力。這是通過全鏈路加速產品FPA提供的實時互聯網進化的下一個進展,通過全鏈路加速,所有因為網絡傳輸帶來的不確定性、不穩定性的困擾都會消失。
RTE產品體系也在進化和擴張,RTC和IM的融合,以及在此基礎上提供的aPaaS保障也是實現一個好的RTE產品所進化的高度和階段。如果不具備這種產品組合,已經很難說是一個專業、全面的技術供應商。
隨著這些進化的發生,未來還會發生什么?回到當初的預測,2015年,我們猜測未來會有20%-30%的APP嵌入實時互動技術模塊,利用這些技術創造更好的體驗。看到這些鼓舞人心的技術和產業環境的計劃,不妨再做一個面向未來的預測。很可能在未來幾年時間里,實時音視頻技術模塊的滲透率將會在關鍵行業超過50%。
發布RTE萬象圖譜,持續賦能場景創新
今年,在產業環境高速進化和使用場景多元化的背景下,我們決定隆重推出“RTE萬象圖譜”。包括20多個行業賽道,超過200個行業場景的總結和梳理。我們希望給開發者和創業者更多靈感和視角,希望和創新者一起去打磨、探索這些場景中真正的價值和創新點,促進RTE行業場景的進一步進化。
同時,我們會發布全球區域熱門場景榜單,分為兩類:一類是從使用量的角度看各個區域排序靠前的熱門場景;另一類是在一定使用規模下,各個區域使用量增長速度最快的新興場景。
除此之外,通過我們對行業環境的統計,會驚訝地發現設備多元化最嚴重的區域是東南亞,有近2萬種不同類型的手機和智能設備在活躍地使用RTE技術。
全球范圍RTE場景的主要連接方式仍然是WiFi,但在5G用量的占比上,中國占到絕對比例的領先,這也預示著5G在未來會成為全球RTE場景主流的Last Mile連接方式。
印度從過去大量使用WiFi的實時互動場景已經轉化為4G非常普及的情況,甚至移動數據的占比超出全球的平均水平。
發布萬象圖譜包括行業、區域和設備環境、網絡環境的數據是為了和創新者站在一起,賦能萬象場景的持續繁榮。
技術層面,過去一年我們所做的高性能自研AI引擎、發布的AI音頻編碼器Silver、無代碼工具和全鏈路加速FPA都是在做深層技術創新,希望能幫大家實現場景繁榮。
產品層面,不斷拓寬邊界,形成了RTE產品體系。最底層的,RTE基礎設施所做的實時互聯網和虛擬網正在成為行業共識,虛擬網相關的技術能力、技術觀點正成為全球潮流,海外廠家也在做類似的虛擬網;RTE核心技術棧以及RTE擴展插件平臺、插件組合,包括基于插件組合和底層基礎設施上所做的RTE無代碼、低代碼開發平臺,在此之上共同創造的aPaaS解決方案,結合通過云市場引入的所有開發者豐富多樣的插件能力以及廣普的數據分析和問題調查平臺水晶球,通過這些產品矩陣和豐富的體系,為開發者提供最完備、最易用的能力支持。
除產品技術外,我們也與行業重要投資機構合作推出了超音速計劃,通過產業合作和服務的形式繼續賦能開發者創新,形成最有影響力、最活躍的創業者社區,希望為所有場景的開發者和創業者提供加速。
同時,聲網推出了全新的云市場插件平臺,通過標準化方式,極大提升開發者使用生態伙伴API和功能服務的應用性和效率。通過云市場,開發者在使用其他能力的時候不需要再聯系新的廠商、了解和談判價格政策,也不需要收到額外的帳單,在我們平臺可以一站式地使用所有能力。
隨著萬象圖譜的發布,包括超音速計劃、共鳴計劃的努力,我們非常期待能幫助所有開發者、合作伙伴一起創新、一起驅動行業發展,迎接實時互動行業更加繁榮的未來!
謝謝大家!