Zoe Liu:被Chrome Media团队的专注精神感染
在WebRTCon 2018期間,Google軟件工程師Zoe Liu接受了LiveVideoStack社區(qū)編輯丁雪豐的采訪。Zoe暢談了AV1及VP9的現(xiàn)狀與應用前景,以及從On2到Chrome Media堅持20多年做編解碼研發(fā)的團隊。
策劃 / LiveVideoStack
LiveVideoStack:大家好,歡迎來到LiveVideoStack采訪間,我們現(xiàn)在是在WebRTCon 2018的現(xiàn)場,在我旁邊這位是Google的軟件工程師Zoe,你是第二次來參加我們LiveVideoStack組織的大會,可能還是有些朋友不太了解你,向觀眾介紹下自己?
Zoe Liu:我去年10月參加了LiveVideoStack的第一次大會,這次是第二次,剛剛從美國的舊金山灣區(qū)過來。我現(xiàn)在是在谷歌工作,目前是軟件工程師。在谷歌之前我在一些實驗室工作過,包括貝爾實驗室,諾基亞研究中心,惠普實驗室等,后期轉(zhuǎn)入工業(yè)界,開始是在蘋果,后來進入TangoMe這家小公司,接下來加入了Google。但是這么多年來從來沒有離開過視頻這個領(lǐng)域,而且更窄一點,沒有離開過視頻編碼和視頻通信這個領(lǐng)域。我曾經(jīng)做過一些實時的視頻通信產(chǎn)品,包括在蘋果做過FaceTime,一共做了三款,然后在TangoMe做移動端視頻電話App,iOS、Android上跨平臺,再后來在Google的推動下做Video Call。最近主要是在做視頻編碼標準的工作。我在清華學習了10年,拿到博士,在美國普度又拿到第二個博士。
LiveVideoStack:看的出來你是相當?shù)臒釔圻@個行業(yè),以后我再用FaceTime的時候,一定會想起你。
Zoe Liu:謝謝。
LiveVideoStack:在今年Google I/O以及NAB大會上,AV1一直都在受到大家的熱捧,可以說是個很大的明星,能不能聊一下你觀察到的整個的行業(yè),還有用戶大家對AV1是怎么樣一個態(tài)度?是怎么樣評價的,大家的反饋是怎么樣的?
Zoe Liu:其實我們還是挺感謝大家對AV1的關(guān)注,第一個想傳遞的信息是,AV1是開放媒體聯(lián)盟AOMedia,簡稱AOM協(xié)力推出的,AOM現(xiàn)在有37名會員了,AV1是整個AOM推出的一個新的視頻編碼標準,這是我們想明確傳遞的信息。確實谷歌是在主導,但AV1是全球的努力?,F(xiàn)在中國已經(jīng)有兩家公司加入了AOM。第二,AV1推出以后,跟H.264、H.265不太一樣的地方是什么?AV1第一是Open,開放,第二是Free,Free是在免版稅,這方面是它最大的一個努力。第三,也是非常重要的一點,任何一個編碼標準還是要看它的核心競爭力,也就是它的編碼性能。最近很多的反饋在于到底AV1相比現(xiàn)在的編碼標準好了多少,我們不好主觀論斷,只是說我們給出了一些數(shù)據(jù),包括AOM聯(lián)盟自己的測試數(shù)據(jù),還包括Facebook最近在它Blog上登出的測試數(shù)據(jù)。另外,大家眾所周知的就是MSU有個對整個業(yè)界編碼器性能的評測,在今年它的評測報告中第一次加入了AV1,整個評測下來,AV1相比它的前一代開源標準VP9,在編碼性能上提升了30%左右,相比H.265/HEVC,編碼性能至少在20%以上的提升。其他人對AV1的反饋主要是想知道,到底我們能不能很快把AV1用起來。可以這么說,我們現(xiàn)在整個組都在全力以赴做AV1編解碼器的優(yōu)化。AOM是一個開源社區(qū),它的Codebase大家可以隨時隨地的下載,做自己的評估。希望每個人或團隊,如果愿意加入我們這個開源社區(qū),隨時歡迎你的貢獻。
我們現(xiàn)在主要(精力)是在編碼器和解碼器的提速上面,拿編碼器來講,因為編碼器是很復雜的,年初對標VP9,我們當時AV1的編碼器的運行時間是VP9的一千多倍,慢很多,但是在我這次來之前,我們現(xiàn)在已經(jīng)達到了VP9的不到60倍,速度已經(jīng)提升很多了。我們下一步希望能夠在年底之前,把它的速度提升到運行時間為VP9的10倍以內(nèi),這樣主要是像Google的YouTube做這種點播的視頻在線網(wǎng)站,可以很快的把它用起來,包括Netflix也提出只要AV1能夠跑起來,他們也會在第一時間加以應用。國內(nèi)像愛奇藝已經(jīng)加入了AOM聯(lián)盟。我們也希望,首先對點播場景能夠盡快的把AV1用起來,之后當然希望用到像這種實時的視頻通信場景中來。
LiveVideoStack:你前面提到了很多公司,有Facebook、Netflix,大家都還是非常關(guān)心AV1的,如果是在說AV1還沒有能夠達到大規(guī)模應用的這樣的一個成熟度的背景下,VP9還是一個不錯的選擇吧?
Zoe Liu:這是一個很好的選擇,前期VP9主要是Google一家主導,市面上大家提到更多的就是H.264和H.265。VP9相對H.264和H.265來講,它是一個開放的,也是一個免版稅的視頻編碼標準,我們希望VP9得到更廣泛的應用。另外,我們想說的是AV1是從VPx系列衍生出來的,反過來講,VP9可以看作是AV1的一個子集。所以,如果大家更多的支持VP9,實際上相當于是為下一步采用AV1做前期準備。
但是我們想說VP9相對于H.264而言,它在硬件的支持方面確實沒有那么廣泛。不過我們也了解到,國內(nèi)的一些在線教育網(wǎng)站,包括像TutorABC,他們一直都是WebRTC、VP8和VP9的忠實用戶。
總結(jié)一下,我們可以說VP9是一個比較不錯的選擇,第一它確實是免費的,沒有專利的問題。第二,VP9是AV1的子集,對VP9的支持,會讓你做好對將來支持AV1的準備。
LiveVideoStack:你前面提到了一些國內(nèi)的公司,像TurorABC,愛奇藝,我們也知道前段時間,愛奇藝剛剛成為了AOM聯(lián)盟中的第一家的本土公司,我相信還有很多國內(nèi)一些本土公司也在觀察是不是要加入這個聯(lián)盟,不知道對于這些公司有什么建議?
Zoe Liu:從我們自己來講,包括Google以及AOM聯(lián)盟希望大家都能夠考慮加入。所以像中國的兩家公司,一家小公司微幀,以及愛奇藝這樣的大公司加入進來,至少對我自己而言,因為我自己是中國人,有更多的國人參與進來,當然感到非常驕傲。另外,我們希望AV1是一種全球性的努力,首先沒有專利問題,第二確實性能有很大的提高,所以希望大家都能夠加入到這個開源社區(qū)里,對這個社區(qū)做貢獻。同時希望看到更多的國內(nèi)的公司參與進來,現(xiàn)在確實有很多公司在跟我們談意向,主要看不同的公司如何跟自己的業(yè)務產(chǎn)品相結(jié)合。我們當然希望AV1有更好的發(fā)展前景。如果你看AOM聯(lián)盟里的會員,他們是完整的一個生態(tài)系統(tǒng),包括瀏覽器制作商,視頻內(nèi)容提供商,硬件廠商,尤其是硬件廠商的支持,我覺得是AV1的發(fā)展大勢所趨。任何企業(yè)加入進來,首先對整個生態(tài)系統(tǒng)的發(fā)展是有好處的,另外我們也希望推動下一代編碼標準繼續(xù)向前發(fā)展。
LiveVideoStack:千萬不要錯過這個風口,大家趕快來吧。您在前面不只一次講到我們這個版權(quán)的問題,那在開發(fā)新一代編解碼器的時候大家一直關(guān)注這個專利陷井,這就像是一個雷區(qū),走過去還是非常的不容易,是不是真的像你前面說到的這么困難?
Zoe Liu:一般來講,如果提到專利問題,是需要由專業(yè)律師來做比較專業(yè)的解答的。那么下面單純從我個人的理解來講,因為AV1宣布自己是一個免專利費的標準,確實不是兒戲,這里面經(jīng)過很多的認證,整個AV1內(nèi),我們開發(fā)了一百多個工具,每一個工具我們在專利方面都做了非常多的工作,來做專利的認證。另外,我也聽到有些企業(yè)比較擔憂,擔心即使經(jīng)過認證,即使現(xiàn)在通過,將來會不會有可能收回,這方面大家可以再去咨詢專業(yè)律師,專利的這種認證一旦確認了是不太可能收回的。最后還想再說明一點,任何一個成員加入到開放媒體聯(lián)盟里來,若擁有編碼方面的專利,一旦加入AOM聯(lián)盟,它原來在H.264,H.265等的專利費用照收不誤。但成為AOM聯(lián)盟會員的基本要求,是需要在AOM場景下放棄自己的專利。AOM現(xiàn)在37家會員。從這個角度講大家應該放心,AV1面臨的專利風險實際上是很小的。
LiveVideoStack:聽到你這么說之后,我現(xiàn)在可以放心一點。那我們前面有聊到點播,那其實除了點播之外AV1還有哪些場景適合?
Zoe Liu:目前AV1的開源codebase,稱為libaom,最適合的(場景)是點播視頻,因為我們提到到目前為止AV1增加了很多的新的編碼工具,造成它的復雜度大大提升,所以在點播視頻里,主要是可以利用后臺強大的Server資源,接受一定的延時,另外可以采用大規(guī)模的并行,來達到編碼速度在一定程度上的保證。對于實時的視頻來講,像視頻通話、像我們這種直播,libaom的應用確實需要等一段時間。如果對AV1里面很多工具熟知,很多朋友也做過相對于H.264標準的加速,隨著手機等移動端硬件性能不斷的提升,對編碼有很多優(yōu)化的可能。我想libaom從點播、到直播、再到實時的應用,大概一年半左右的時間吧。
LiveVideoStack:我們看到AV1在各種場景下面落地。
Zoe Liu:希望是這樣,另外這里想提到的主要是硬件廠商對解碼端的支持,因為現(xiàn)在可以看到AOM里面,像因特爾,英偉達,ARM等已經(jīng)明確表示支持。很多非AOM成員,也明確表示支持AV1硬件解碼。所以整個硬件生態(tài)伙伴的支持推動,都會對AV1的推廣起到很大的促進作用。
LiveVideoStack:最后能不能聊一下Google中的多媒體團隊信息,這是一個怎樣的團隊?我們還是非常好奇。
Zoe Liu:最近也有朋友問起來,我們這個團隊是在Chrome Media下面,整個大組一共30人左右,除了做視頻編碼以外,還在做音頻的編碼,圖像編碼,以及圖形編碼。我們做視頻編碼最核心算法工程師不超過14人。對于AV1這一代新標準的制定,我們組在標準算法貢獻上、在開源codebase libaom的代碼貢獻方面都在90%以上。我們不僅做標準,因為谷歌這邊所有代碼都需要自己寫,沒有另外的工程師幫助優(yōu)化。當然現(xiàn)在有許多開源社區(qū)進來,在跟我們一起對libaom做貢獻。
與此同時,我們還推進了和大學、實驗室的合作,我們自己也會發(fā)表表文章,申請專利?;旧鲜沁@樣。
我們組最開始的時候是在2009年,Google并購了一家名為On2的小公司,On2已經(jīng)成立了20年,一直都是做開源的Codec,從VP3、VP4一直做到VP8。被Google收購以后,推出了VP8,包括我現(xiàn)在的主管在內(nèi),他們在編解碼領(lǐng)域真的是耕耘20年了,現(xiàn)在跟他們在一起,感情挺深的。他們這20年來體現(xiàn)了非常專注的精神。被谷歌并購前作為一家小公司,做開源編碼,不是主流,經(jīng)過多次起起伏伏,直到有一天(被Google收購,并推出AV1)。當初很難想象他們有一天可以推出這么大的社區(qū),推出一個主流的編碼標準AV1,一步一步發(fā)展過來,我們組給我的影響是非常大的,主要是專注,對視頻編碼這一領(lǐng)域的執(zhí)著。我希望自己也能把這種精神傳承下去。
LiveVideoStack:希望20年后有更多的標準迭代,有更多的變革性技術(shù)。非常感謝您接受我們的采訪。
WebRTCon 2018 PPT 第二波
由于需要確認的信息較多,很多講師的PPT還在內(nèi)部審核中。但迫于大家的需求,我們會分若干次放出本次大會的PPT,點擊『閱讀原文』進行PPT第二波分享內(nèi)容的下載。
由LiveVideoStack和CSDN聯(lián)合出品的LiveVideoStackCon 2018音視頻技術(shù)大會將與10月19-20日在北京舉行,目前正在招募出品人和講師。如果你在多媒體開發(fā)領(lǐng)域獨當一面,歡迎通過speaker@livevideostack.com聯(lián)系我們,我們會在48小時內(nèi)反饋。期待與你相聚北京。
總結(jié)
以上是生活随笔為你收集整理的Zoe Liu:被Chrome Media团队的专注精神感染的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: IBM Cloud Video工程师Sc
- 下一篇: 音视频技术开发周刊 53期