音视频技术开发周刊 | 217
每周一期,縱覽音視頻技術領域的干貨。
新聞投稿:contribute@livevideostack.com。
小提示:點擊標題即可跳轉到相應文章
鏈接跳轉僅支持公眾號相關鏈接
即構科技:解決行業痛點,以MSDN為基礎構建全球實時音視頻通信云
近日,LiveVideoStack很榮幸地采訪到了即構科技RTC后臺技術總監——肖瀟。在訪談中我們了解到即構科技在構建全球實時音視頻通信云的過程中,針對海內外出現的不同情況,依托其自研的MSDN基礎網絡,采取層級式的內容分發架構,去適配海外各個地方的差異;并且會把每個國家/地區的當地行政區域劃分、當地運營商等情況進行詳細地研究;另外,端側靈活的云控能力也是不可或缺的。
華為云網絡覆蓋全球2500+站點,打造高品質、低成本接入體驗
9月23日,華為云舉辦了線上華為全聯接大會,今年的全聯接大會以“深耕數字化”為主題,探討了各行各業如何通過打造云技術、構筑云生態,積極實現數字化轉型。LiveVideoStack近期也采訪了華為云媒體服務資深產品專家盧志航,和他一起討論了華為云RTC技術、5G與RTC的技術結合,華為云最新發布的SparkRTC實時音視頻服務,以及RTC未來應用場景等話題。
對話RTP作者Ron Frederick: 我非常期待QUIC的發展
RTP和RTCP是處理所有多媒體傳輸的重要協議,于1996年1 月在RFC 1889中定義。最近,LiveVideoStack郵件采訪了RTP的作者之一Ron Frederick。在訪談中,他向我們講述了RTP是如何創造出來的,并分享了他對當下流行的WebRTC和QUIC的看法。Ron還回憶了1992~2000年他在施樂PARC工作時的美好時光。
ICCV-2021 Oral | AdaFocus:利用空間冗余性實現高效視頻識別
現有高效視頻識別算法往往關注于降低視頻的時間冗余性(即將計算集中于視頻的部分關鍵幀),如圖1 (b)。本文則發現,降低視頻的空間冗余性(即尋找和重點處理視頻幀中最關鍵的圖像區域),如圖1 (c),同樣是一種效果顯著、值得探索的方法;且后者與前者有效互補(即完全可以同時建模時空冗余性,例如關注于關鍵幀中的關鍵區域),如圖1 (d)。在方法上,本文提出了一個通用于大多數網絡的AdaFocus框架,在同等精度的條件下,相較AR-Net (ECCV-2020)將計算開銷降低了2.1-3.2倍,將TSM的GPU實測推理速度加快了1.4倍。
揭開“視頻超分”黑科技的神秘面紗
在看電影時,有一幕大家應該都非常熟悉,警察從證據圖片中選取一塊區域放大,再放大,直到一個很小的目標變得清晰可見,從而發現重要的線索。現實中是不是真的有這樣的技術,可以把模糊的小圖變得清晰?答案是,一定程度上可以,這項黑科技就是超分辨率技術,從低分辨率圖像恢復高分辨率圖像,提高圖像的質量,從而獲得更加清晰的圖片。超分辨率技術具有廣泛的實際應用,如醫學圖像重建、人臉圖像重建、遠程傳感、全景視頻、無人機監控、超高清電視等。同樣道理,實時視頻也可以進行超分辨率處理,將模糊的小分辨率視頻變成高清超高清視頻,本篇干貨分享就來揭開這項黑科技的神秘面紗。
白話解讀 WebRTC 音頻 NetEQ 及優化實踐
NetEQ 是 WebRTC 音視頻核心技術之一,對于提高 VoIP 質量有明顯的效果,本文將從更為宏觀的視角,用通俗白話介紹 WebRTC 中音頻 NetEQ 的相關概念背景和框架原理,以及相關的優化實踐。
中央廣播電視總臺北京冬奧會轉播技術資源概述
2022年,北京冬奧會將利用最新的媒體技術進行賽事轉播。對于奧運會持權轉播商來說,轉播技術資源的規劃和配置是籌備工作的重點,也是賽時轉播系統運行的基礎。本文介紹了北京冬奧會主轉播機構奧林匹克轉播服務公司的國際公共信號制作標準、新技術新服務,以及總臺轉播資源規劃及技術預定概況。
在Windows Server上大規模部署HTTP/3
Windows Server 2022 已于上月發布。從那時起,通過與Microsoft 365團隊的合作,我們已經開始在全球的Exchange Online服務前門服務器上部署最新的Windows Server,主要目標是在https://outlook.office.com中添加對HTTP/3的支持。到目前為止,我們只將部署規模擴大到前端服務器容量的20%,但我們得到的數據看起來很棒!
https://techcommunity.microsoft.com/t5/networking-blog/deploying-http-3-on-windows-server-at-scale/ba-p/2839394
針對非塊架構的幀間預測可伸縮運動模型
本次演講主題為針對非塊架構的幀間預測可伸縮運動模型(Switchable Motion Models For Non-Block-Based Inter Prediction in Learning-Based Video Coding),在進行幀間預測時,同時使用Affine運動模型和平動運動模型,得到兩個候選圖像,通過兩者之間的差異圖像進行分割,為每一個區域判斷使用那種運動模型,綜合利用Affine運動模型和平動運動模型兩者的優點,帶來主觀和客觀的性能增益。
基于 CNN 的 VVenC 編碼加速
這篇文章主要介紹了基于學習的編碼算法與 VVenC 相結合之后的實驗性能,結果表明將這些基于 CNN 的算法遷移到 VVenC 上對于實驗性能提升也是十分有效的。
StyleGAN3問世,等變性perfect!皮膚、毛發不再粘屏幕,還能360度旋轉 | 終于開源了
StyleGAN生成式對抗網絡是一種最先進的高分辨率圖像合成方法,從最初的GAN到StyleGAN2變體,其圖像合成能力一直在突破人類的想象,而這次升級版StyleGAN3的對生成細節的把控更是令人驚嘆!
智能座艙架構與功能開發流程詳解
智能汽車座艙發展主要經歷了四個階段:包括電子座艙階段、智能助理階段、人機共駕階段、第三生活空間。當前隨著智能汽車在AI算法、智能駕駛上的不斷發展進入了L3級自動駕駛的“人機共駕階段”。在智能座艙的表現形式為該階段包含對語音控制和手勢控制技術突破,車內軟硬件一體化聚合,實現車輛感知精細化,車輛可在上車-行駛-下車的整個用車周期中,為駕乘人主動提供場景化的服務,實現機器自主/半自主決策。AI座艙核心價值將表現為基于場景的主動化交互和服務,很多也被稱之為SOA的智能車服務。
MPAI正式啟動端到端的AI編碼標準
近期,MPAI創始人、MPEG前主席Leonardo Chiariglione在他的博客上宣布MPAI正式啟動端到端的AI編碼標準。Leonardo表示,在各方編解碼器競爭激烈的態勢下,MPAI將保持更加清醒的態度,積極致力于基于AI的視頻編解碼方法。
09 / LiveVideoStack主編觀察:有趣的靈魂是一面鏡子
過去一段時間,與幾位技術人的直播聊天讓我收獲不少。把自己當做產品。不僅僅是工作輸出如此,人與人之間的關系,leader對團隊的管理,都可以用產品來類比。此時,自己就是交付給別人或團隊的產品,要考慮用戶需求(換位思考)、場景、接口(溝通能力)、體驗優化。
韋東奕陳杲同獲達摩院青橙獎,90后數學新星光彩奪目,卻說「沒有黃金一代」
一個是被田剛院士贊許——“完全有可能成為國際著名數學家”的北大掃地僧。一個是26歲攻破世界級難題、成果登上世界數學四大刊之一《數學新進展》的中科大特任教授。此番又雙雙在國內頗具分量的公益性學術評選中亮相,難怪外界會有這樣的看法:新數學黃金一代風頭正勁。但身處聚光燈中心的人們,卻表達出了沒有黃金一代,只有一代更比一代強的意思。
2021年中國基礎云服務行業數據報告
中國整體云計算市場規模再創新高,市場規模達到2256.1億元,未來有望迎來新一波增長機遇。在服務形態上:當前中國云計算市場,仍以云資源(IaaS)需求為主,但云能力(PaaS)已逐漸成為驅動中國云計算市場持續擴張的重要增量因素。在部署模式上:公有云仍然占據主導地位,非公有云通過多種形態,將云能力向公有云領域延伸。
元宇宙的七個挑戰
新事物會帶來機會而挑戰也是伴隨而來。然而現實卻是人們還沒準備好克服元宇宙將帶來的挑戰。當中包括了知識產權的糾紛,數據保護和隱私問題,法律問題,貨幣和支付系統問題,科技上的限制和民眾接受度仍然低等等挑戰。除了上述之外,高資本投入以及元宇宙是否成為壟斷性極強的產業也是一個挑戰。
活動推薦
【免費參與】全真互聯網下音視頻技術創新應用
騰訊云音視頻基于在音視頻領域21年的積累,構建了全球領先的RT-ONE?音視頻通信基礎網絡、完整的音視頻PaaS平臺及終端SDK產品矩陣,10月29日 | 北京,LiveVideoStack聯合騰訊云共邀5位技術大牛,將為大家帶來全新all in one終端引擎、跨平臺能力、海外直播技術、云渲染技術、多媒體處理等技術的最新動向。
? 活動時間:2021/10/29 14:00-18:00
🚀 參與方式:線下參與(免費)
🎉?福利領取:
成功報名活動,掃碼進群即可獲得品牌優質內容匯總
參與專場互動環節還有機會獲得精美禮品↓↓↓
掃碼?👆🏻👆🏻👆🏻立即報名
🌟現場互動🌟
除了技術干貨分享,您還將在現場參與更多有趣和充實的互動環節,我們也準備了精美禮品等著你:
問答有禮:講師分享結束后,您將有機會就技術困惑向專家提問。
產品體驗:活動現場專門設有騰訊云展臺,您可以前往親身體驗技術落地實踐。
(精美禮品)
報名鏈接:
http://livevideostack.mikecrm.com/quIpQ6k
LiveVideoStack Meet | 蘇州:視頻會議研發中心一日游
LiveVideoStack Meet第二站將于10月24日在蘇州舉行,這一次我們帶會大家體驗“視頻會議研發中心一日游”。和眾多技術大拿一起,聊聊實時音視頻技術、后疫情時代視頻會議的演進方向、智能會議助理解決方案與服務,暢談視頻會議的下一個十年……
報名鏈接:
https://8392623630544.huodongxing.com/event/4617715336600
插圖源自Pexels
超強干貨來襲 云風專訪:近40年碼齡,通宵達旦的技術人生總結
以上是生活随笔為你收集整理的音视频技术开发周刊 | 217的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 华为云网络覆盖全球2500+站点,打造高
- 下一篇: 大话ion系列(二)