未来已来,音视频江湖再起波澜
從通信為王的時代,到互聯網高歌猛進的二十一世紀,音視頻技術一直是眾多科技公司的必備技能。一部手機聯通全球各地,一個社交賬號互動各國友人,已經不是什么新鮮事;就連超低延遲,超高清畫質,沉浸式互動的元宇宙和全真互聯,都在快速發酵,似乎馬上就要被底層的摩爾定律催化過期。
新鮮的應用容易消逝,經典的技術一直散發光芒。如今的音視頻技術可謂遍地開花。實時音視頻通信網絡(TRTC),即時通信網絡(IM),流媒體分發網絡(CDN),這些技術名詞你可能沒聽過,但你每天接觸的在線課堂、在線會議、電商直播、視頻社交卻離不開這些技術的支持。
然而,音視頻技術的成熟與豐富,也給眾多開發者帶來了困擾。越來越多的多終端開發者在開發音視頻通訊相關應用時,為了實現不同的產品能力,往往需要集成多個SDK,不但增加開發聯調工作量,更增加工作難度。
與此息息相關的是,傳輸優化,業務適配,內容分發等應用層的需求直接影響用戶體驗。如何低門檻,低成本地滿足這類需求也是一大難點。
十年磨一劍。騰訊云音視頻歷經21年的積累和沉淀,打造了全面的音視頻產品矩陣,如今站在全真互聯時代門口,面對眾多行業痛點和難點,騰訊云音視頻將三網合一,迎難而上,掀起音視頻浪潮。
未來已來,全真互聯時代三大特點
2020年12月,騰訊董事局主席馬化騰在騰訊年刊中聊到互聯網未來的趨勢和轉變,并預言全真互聯網時代的到來。
馬化騰提到,互聯網走到今天,實時通信到影音視頻等一系列基礎技術已經成熟;計算能力快速提升,推動著信息接觸、人機交互的模式發生更豐富的變化。這是一個從量變到質變的過程,它意味著線上線下的一體化,實體和電子方式的充分融合。虛擬世界和真實世界的大門已經打開,無論是從虛到實,還是由實入虛,都在致力于幫助用戶實現更真實的體驗。
全真互聯時代的到來其實早有預兆。正如騰訊云音視頻專家工程師常青在一次采訪中提到,縱觀整個互聯網行業,我們會看到最近幾年應用層面凸顯出三大變化。
一是追求越來越低的傳輸延時。客戶對延時的要求越來越苛刻。比如在線合唱解決方案中,兩個用戶的聲音傳輸延時已經壓縮到 70ms 以下,接近兩點之間的網絡傳輸延時。這和以往 RTC 的傳輸延時要求相比可以算很苛刻了。
二是對虛實結合的運用越來越普遍。比如騰訊會議支持虛擬背景技術,讓自己的影像可以跟漂亮的背景圖片實現完美的融合。同時,伴隨著 web assembly技術的普及,相關的推理庫以及模型也開始在瀏覽器上落地,這使得 WebRTC 的網頁用戶,也能夠享受到這一功能。
三是 VR 技術有可能會走出“花瓶”階段進入穩定的發展期。隨著 Wi-Fi6 無線串流方式等技術的成熟,以及內置芯片越來越強大,VR 設備的舒適度和可玩性都比之前有了大幅提升。同時,相關的生態也越來越成熟,未來很可能會進入一個用戶穩定增長的健康發展階段。
從在線合唱,到視頻會議,再到VR技術成熟,我們不難發現,其背后都有音視頻技術作為關鍵支撐。換言之,全真互聯時代的到來,離不開優秀的音視頻技術。而騰訊云音視頻,早已有備而來。
三網合一,打通企業音視頻構建的“任督二脈”
從QQ時代開始,騰訊就一直致力于音視頻技術的研發與應用。時至今日,騰訊在音視頻領域早已是技術排頭兵。而騰訊云音視頻作為基礎設施聚合的首要陣地,早已基于“云、邊、端”基礎設施打造了全球一流的三張網絡——實時音視頻(TRTC)網絡、即時通訊(IM)網絡和流媒體分發(CDN)網絡。
如今,為解決SDK集成等行業難點,降低企業構建音視頻應用的門檻,騰訊云音視頻推出“三合一”的RT-ONE?音視頻通信基礎網絡,整合上述三張網,為業界音視頻通信PaaS平臺構建網絡通信基座。
RT-ONE?復用三張網絡形成技術疊加優勢,可以滿足統一調度、統一接口方式、就近接入、傳輸優化以及業務適配需求,極大地降低音視頻產品接入門檻。與之前孤立的網絡相比,RT-ONE? 具備兩大核心優勢:
一是技術融合更加徹底。傳統的 CDN 網絡在完成融合以后,吸收了 RTC 的很多技術,推出了“快直播”這類兼顧 RTC 低延時和 CDN 高并發兩個特點于一身的特色產品。用戶可以享受到更低的延時和卡頓率,又能實現上百萬人的高并發觀看。此外,RTC 網絡復用了很多 CDN 網絡的高并發組件,吸收了分布式設計理念,從而獲得了更高的并發能力和更強的穩定性。
二是產品互通更加自然。以往使用騰訊云音視頻的 RTMP 直播需要開通直播服務,使用 RTC 連麥需要開通 TRTC 服務,兩套服務之間互相依賴。已經使用直播服務的客戶要使用 TRTC 連麥就得重新對接方案,而使用 TRTC 做在線教育的客戶要完成視頻錄制,則必須開啟直播錄制服務。而基于“RT-ONE?”網絡,客戶可以使用移動直播的 V2 接口,實現 TRTC 和直播服務的無縫切換,TRTC 的錄制服務也可以通過升級工作的完成,實現了更好的用戶體驗和更加靈活的定制能力。
以 RT-ONE? 賦能一場直播帶貨為例。在該場景中,客戶需要同時用到TRTC、IM 和 CDN 的能力。
首先,主播向觀眾介紹商品,向觀眾贈送代金券,觀眾通過商品鏈接進行秒殺、搶購,發彈幕跟主播互動等等,這些行為都需要用到IM的消息能力;
有時主播還要與觀眾進行連麥互動,這時候就需要使用TRTC提供的實時音視頻通信能力。
同時,一場帶貨直播所面向的觀眾是非常龐大的,峰值時觀眾人數甚至可能超過百萬,這就需要依靠CDN的流媒體分發能力。
而上面提到的僅僅是電商直播場景中最基本的能力。除此之外,還有PK帶貨、點贊送禮、搶紅包、抽獎、等等也都是常用的能力,也都需要依靠TRTC、IM、CDN三張網絡來共同實現。
可見,RT-ONE?不單單是為了滿足客戶越來越多的三網并行需求,相比于傳統獨立的 TRTC+IM+CDN方案,深度融合的RT-ONE?網絡通過復用三張網絡的“云、邊、端”基礎設施,在接入門檻、網絡質量、使用成本上都更具競爭力,并且在性能上,RT-ONE?>TRTC+IM+CDN。
如果把企業的“技術”和“產品”看作企業的“任督二脈”,那么 RT-ONE? 的到來可謂是一本融匯貫通的武功秘籍,專為企業打通構建音視頻應用的“任督二脈”。然而,只練內功不足以御敵千里--除了 RT-ONE? 之外,騰訊云音視頻在11月3日全球數字生態大會發布了“騰訊云視立方”,為企業整合終端能力,內外兼修。
終端能力整合,降低開發者使用門檻
視頻直播火熱的當下,各行各業的音視頻應用層出不窮。然而,為了實現不同的產品能力——如美顏美妝、主播觀眾連麥、彈幕評論等,開發者往往需要集成多個SDK,與此同時,不同功能模塊之間雜亂不統一,API調用規則繁雜無章,都大大增加了開發者的開發聯調工作量,
騰訊云視立方?音視頻終端引擎(RT-Cube?)旨在整合終端能力,降低開發者門檻,實現集成一次SDK即可調用所有終端能力的開發體驗。
從用戶的角度來看,RT-Cube?是一個音視頻終端一體化產品。其功能模塊豐富而靈活,囊括了當下最熱門而實用的六大功能,分別是:直播開播,主播觀眾連麥/跨房PK,視頻錄制編輯/發布上傳,直播觀看,點播觀看,和音視頻通話。
以六大功能為基礎,騰訊云視立方(RT-Cube?)為用戶提供了多個預設的SDK版本以及諸多增值能力。其中,預設SDK版本包括移動直播SDK,短視頻SDK,音視頻通話SDK,播放器SDK,以及全功能SDK;同時,客戶還可根據自身需求進行高級配置,自定義功能模塊組合,打造專屬于自己的SDK。真正做到了一次接入,處處調用,同時又不失靈活性。
增值能力旨在為客戶打造高品質的視聽體驗。包含美顏特效SDK,正版曲庫SDK以及數據質量監控等諸多優化功能。真正做到專業,穩定,高質量的終端服務。
以泛娛樂領域為例。騰訊云視立方結合自身能力,為眾多泛娛樂客戶打造了低代碼解決方案。通過客戶端、服務端的全碼開源,豐富經典的玩法“開箱換皮膚”即可上線。在實時合唱場景中,騰訊云視立方帶來了超低延時的體驗升級,并針對企業普遍關注的版權問題,開設AME直播互動曲庫直通車,提供超過20萬首正版歌曲。
而在企業協作領域,騰訊云視立方推出了音視頻通話組件、多人音視頻協作組件和1v1在線客服組件,可以被集成到企業應用中使用,輕松擁有與微信/QQ通話、騰訊會議、企點客服同樣品質的音視頻通信能力。
不只是泛娛樂和企業協作。結合騰訊云RT-ONE?音視頻融合網絡以及騰訊云視立方(RT-Cube?)音視頻終端引擎的“云+端”基礎能力,騰訊云音視頻目前已經在社交娛樂、直播帶貨、建筑地產、文旅等多個行業落地應用,在音視頻市場一騎絕塵。
動態編碼技術升級,明眸帶來全新高清視野
用戶體驗決定一切。騰訊作為國內首屈一指的產品公司,深諳產品成功之道,在音視頻領域也同樣恪守這個規律。
騰訊云音視頻基于智能動態編碼技術,打造了明眸極速高清解決方案。通過智能場景識別,動態編碼匹配,畫質修復增強相結合,實現了以更低碼率提供更高清的服務,旨在為用戶帶來全新的高清視界。
明眸極速高清解決方案主要有高清低碼,超清視野,畫質修復和高可定制四大優勢:
高清低碼:基于智能場景識別,動態編碼技術,CTU/行/幀三級碼率精準控制模型,明眸極速高清解決方案可以為直播、點播等行業以更低的碼率(平均節省50%+),提供更高清的流媒體服務。
超清視野:基于超高性能的編碼算法,明眸極速高清解決方案支持高達8K的高分辨率視頻實時編碼,融合超分辨率,HDR,拓寬色域等技術,可為用戶生成超高品質的視頻,提供極致清晰的觀感。
畫質修復:通過3D去燥,色彩增強,超分辨率,插幀等處理技術,明眸極速高清解決方案可以有效消除老片中噪點,馬賽克,抖動,頓挫感等問題,提高畫面清晰度,讓畫質重生。
高可定制:明眸極速高清解決方案具有插入簡單,成熟穩定,高效靈活的 API 接口,相當于定制化的視頻智能服務私有化中臺,可為用戶構建安全穩定,高效可靠,性價比高的視頻云服務生態。
直播、廣電媒體、在線視頻和短視頻是騰訊明眸極速高清解決方案的主要發力場景。以騰訊內部業務為例,使用明眸極速高清后,整體業務節省了大概70%的存儲和帶寬成本,同時由于文件的減小,視頻首幀的耗時也降低了20%,整體播放的流暢度大大提升。對于點播場景的極限壓縮,1080P的高清電影視頻,極速高清H.264可以在1.5M的碼率下,保持整體的主觀清晰度,或者說保持VMAF在95分以上。H.265則可以在900kbps達到同樣的效果,AV1甚至做到650kbps。
而對于課堂教育類場景,壓縮效果則更明顯,課堂類場景相對靜止畫面較多,可以利用更多的編碼工具。對于PPT類課堂場景,極速高清H.264可以在67kbps下,同時保持主觀清晰度,H.265可以做到35kbps, AV1可以做到28kps, 此時,視頻的碼率大部分已經低于音頻的碼率,極大的減少了視頻的存儲和帶寬。
目前,騰訊明眸極速高清解決方案已經與CCTV、快手、斗魚等多個行業領導企業達成合作,為這些企業帶來全新的高清視頻服務。
音視頻拉開時代大幕,騰訊云音視頻一馬當先
全真互聯時代的到來少不了音視頻技術的加持,而音視頻領域又以騰訊云音視頻一馬當先。
今年1月7號,IDC(國際數據公司)發布了《中國視頻云市場跟蹤(2021上半年)》報告。報告中提到,2021上半年中國視頻云市場規模達到43.7億美元,同比增長達到38.7%。其中,音視頻解決方案市場增速達到47.6%,騰訊云排名行業第一。
而這行業第一,其實由來已久。
自2018年以來,IDC持續中國視頻云市場,騰訊云解決方案市場份額均居首位,至今已取得“四連冠”。在騰訊云音視頻持續領跑的背后,IDC提到,“騰訊云音視頻在報告期內發布視立方(RT-Cube?)音視頻終端引擎,整合直播、TRTC、IM等所有終端能力,并配套RT-ONE?音視頻通信網絡,復用三張網絡的“云、邊、端”基礎設施,意在為全行業提供開箱即用的音視頻應用開發工具”。
值得一提的是,IDC數據還顯示,在RTC(實時通信)這個重點方向上,騰訊云音視頻的增速在頭部廠商中排名第一。
TRTC(騰訊云實時音視頻)在QQ、騰訊會議、全民K歌、王者榮耀等國民級應用取得優異實踐之外,已經服務于各行各業5000多家客戶。其后臺架構技術獲得中國知識產權最高獎項“中國專利金獎”,音視頻編解碼、音視頻處理等技術領域保持全球技術領先,并可聯動騰訊云優勢直點播能力,提供實時互動、直點播、視頻處理等音視頻全鏈路技術方案,一站式滿足客戶的音視頻需求。
隨著國內音視頻技術的不斷演進以及相關產業的成熟,騰訊云音視頻作為音視頻的行業領跑者將深耕于技術領域,并在未來不斷探索,力求為無數前沿的開發者及正在崛起的各類尖端產品保駕護航。在5G+8K的超高清視頻時代到來之前,騰訊云音視頻也期待與全行業的發展齊頭并進,迎來全新的格局。
總結
以上是生活随笔為你收集整理的未来已来,音视频江湖再起波澜的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Opera视频出海非洲面临的技术挑战及应
- 下一篇: 2022 WebRTC发展趋势分析