实时音视频是什么?有哪些新的应用场景
實時音視頻是什么
以直播場景來舉例,例如主播1往視頻云上推流,觀眾拉流觀看,即形成了單向直播的場景。觀眾能夠看到主播,但是主播看不到觀眾。另外一種像剛才一樣,主播1推流出去,觀眾拉流觀看,其中觀眾1希望能和主播1視頻連麥互動,這時觀眾1也會推一路流出去,主播將觀眾1的音視頻流拉下來觀看,這樣他們之間就構成了一個相互拉流觀看的場景,相互都能看見對方。同時他們兩個的音視頻流會被實時的內容分發網絡分發給觀眾來觀看。什么是實時音視頻,就是說實時馬上能看到。
實時音視頻有哪些新的應用場景
在線教育視頻直播已經處于一個比較成熟發展的階段,最近這半年在線教育出現了一些新的玩法,例如在線的鋼琴陪練。老師通過ipad給小朋友上課。老師會仔細聽小朋友的鋼琴演奏的效果,給他提建議,同時老師也可以演奏鋼琴,給小朋友示范練習,整個過程是一個云視頻溝通的場景。老師跟學生分別把他們的音視頻流推到實時傳輸網絡,然后相互都把對方的音視頻流拉到ipad上觀看,這樣就構成了視頻通話的場景。小朋友的父母親可以從CDN側拉流觀看老師和小朋友上課的情形,這就是在線鋼琴一對一陪練的場景。
技術上能滿足什么要求呢?
首先延遲要比較低,其次是要流暢沒有卡頓的感覺,不能影響整個的體驗。如剛才提到的鋼琴陪練視頻,清晰度要達到720P,針對音樂聲音,采樣率要達到48kHz,也即是全帶語音,才能夠比較完好地還原音樂效果,音頻的碼率要超過100kbps。最后兩個關鍵技術就是噪音抑制和回聲消除。噪音抑制是把背景的噪音去除掉,但不是去除掉所有的噪音,要針對心理學模型保留適當的舒適噪音。回聲消除,就是把老師跟小朋友之間的通話回路的回聲消除掉,我們期望麥克風是全向性的,如果是定向性的,需要把硬件的回聲消除功能關掉,使用軟件的回聲消除模塊來消除回聲。
下一個場景是線上的KTV房,這是即構科技的客戶酷狗直播的一個應用場景。有N個用戶等著排隊唱歌,跟線下的K歌房一樣,圍觀的用戶都能夠聽到我K歌的聲音并看到字幕。這里涉及的技術就是要把歌者的聲音還有伴奏的聲音歌詞全部混在一起,再通過音視頻的通道、實時傳輸網絡實時傳輸出去。觀眾在聽我唱歌的時候,能夠聽到我有沒有跑調、背景音樂是否協調,如果不協調,體驗感會很差。
另一個場景合唱直播,這是KTV直播場景的一個延伸,唱歌的人不是一個而是多個。去年12月的時候,馬云和王菲合唱了一曲《風清揚》,我們如果把合唱搬到線上是這樣一個效果:他們分別在兩個不同的直播間,看著MV視頻畫面,聽著伴奏,就像在線下KTV里K歌一樣演唱,最終圍觀的觀眾可以在手機的APP上看到馬云和王菲還有MV疊加的視頻畫面,還可以聽到他們兩個合唱和背景音樂混在一起的效果。這就是時下比較流行的合唱直播,把線下合唱的場景搬到線上視頻直播里。
這個場景下即構科技有兩種方案,一種方案是能夠讓馬云跟王菲兩個人相互連麥聽到對方的聲音,一邊唱一邊聊。這個好處是會有更多的互動,缺點是可能會出現一些歌詞上的不同步。第二種方案是讓馬云能夠聽到王菲的聲音而王菲聽不到馬云的聲音,保證做到歌詞跟背景音樂還有兩邊唱歌的聲音是完全同步的。
還有一個場景是跨國的在線教育,例如跨國互動小班課堂,多個學生可以和老師實時互動上課。當前互動小班,PC端我們可以支持32個學生同時上課,手機端可以支持20個,此外我們還提供老師跟學生寫寫畫畫的白板。我們的客戶好未來反饋說小孩子特別喜歡這一種功能。
另外還有雙師課堂,比如說在北京有一個名師在考研的沖刺班上講課,在深圳、上海和杭州等城市的多個教室的學生們也希望聽到這個名師老師的課,雙師課堂的解決方案在名師的課堂部署一個錄播機、兩個攝像頭、麥克風等設備,各個城市的N個教室里的學生能通過他們教室里的錄播機收看到名師上課的情形。因為遠程有一位名師在授課,本地有一個老師在輔導,所以叫做雙師課堂。
基本上即構實時音視頻服務的行業包括了視頻直播、在線教育、視頻社交、游戲語音、物聯網、家庭陪護等領域。我們能在全球范圍做到低延遲(100ms)、高清不卡頓,這得益于我們底層自研的音視頻技術引擎,得益于我們在全球超過200+BGP節點的網絡覆蓋,得益于超過16年的音視頻技術積累。我們的客戶分布在全球100多個國家,覆蓋中國、中東、北美、東南亞、北非等國家和地區。
總結
以上是生活随笔為你收集整理的实时音视频是什么?有哪些新的应用场景的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: CleanMyMac最新发布的版本是4.
- 下一篇: 字符数组的翻转