阿里基础设施技术亮相SIGCOMM 2018
8月21日,一場在匈牙利舉辦的關于未來網絡技術走向的SIGCOMM 2018學術頂級會議獲得了來自亞洲、北美和歐洲科技界人士密切關注。阿里巴巴在會上完整展示了網絡軟硬件技術棧和阿里云飛天虛擬網絡系統-洛神。阿里巴巴在會上首次從多個維度分享了網絡技術遠景和開創性進展,獲得了參會各方的高度認可。
SIGCOMM是網絡領域的頂級學術會議
三十多年來世界頂尖的大學和科技公司在SIGCOMM上發表的論文奠定了人們對最先進的網絡技術的認知。SIGCOMM對論文的質量要求極高,必須具有基礎性貢獻、前瞻性影響和堅實的系統實現,每年只錄用30篇左右。由于SIGCOMM的論文往往會被廣泛引用,并具有極大的影響力,因此能在SIGCOMM上發表論文是所有網絡研究人員孜孜以求的榮譽。
這屆SIGCOMM,阿里巴巴是唯一擁有技術專家參與論文評審和方向制定的中國公司。
此外,阿里巴巴還在會議的第一天舉辦了阿里之夜活動,與來自亞洲、北美和歐洲的知名學府包括麻省理工學院、斯坦福、卡內基梅隆、加州大學伯克利分校、普林斯頓大學在內的大學教授和博士生們分享了阿里面向未來網絡技術的愿景和挑戰。
美國工程院院士、SIGCOMM終身成就獎得主Jennifer Rexford教授、清華大學長江特聘教授畢軍老師、卡內基梅隆大學Justin Sherry教授、康奈爾大學Rachit Agarwal教授參加了活動并做了分享。
技術分享回顧
阿里巴巴的網絡軟硬件技術棧
“在當前網絡的規模快速增長,以及上層應用對網絡性能、穩定性和成本的要求不斷提高的背景下,未來網絡技術亟待突破的三大方向包括可編程/定制化硬件(如SmartNIC,programmable ASIC),軟硬件一體化的設計(如RDMA,kernel bypassing),以及智能化網絡運維(如AIOps,intent-based networking)。”
——阿里巴巴研究員張銘
目前,阿里在這幾個關鍵的方向上,已經系統性的開展了前瞻性的基礎研究,并有多項最新研究成果已經或正在阿里現網上落地和規模化部署。
阿里巴巴“Hyper-scale Edge Network”愿景
阿里巴巴基礎設施首席網絡架構師蔡德忠分享了阿里基礎網絡的整體演進構想,展示了阿里在基礎網絡方面行業領先的包括RDMA,網絡可視化,全球流量調度等前沿研發成果,并首次對外分享了阿里巴巴 “Hyper-scale Edge Network” 的愿景。
“從基礎網絡的角度看,云計算的第一階段完成了支持百萬級服務器的數據中心網絡,接下來云計算會更加靠近用戶,向邊緣部署以提供更好的用戶體驗和支持更多的應用場景,比如物聯網,支持百萬級服務器、分散部署在成千上萬個邊緣節點的超大規模邊緣網絡 “Hyper-scale Edge Network” 將是網絡要實現的下一個重要場景,關系到云計算在未來的核心競爭力。“Hyper-scale Edge Network” 必須解決三大核心問題包括:高效的自動化運維體系,智能化流量調度和多層次安全防御。”
——阿里巴巴基礎設施首席網絡架構師蔡德忠
智能化運維中“網絡層次化模型”
隨著互聯網經濟的飛速發展,互聯網公司的網絡規模和復雜度已達到了前所未有的高度,并且還在快速增長。如何高效的管理大規模網絡以實現高性能、高穩定和低成本的網絡服務,一直以來是網絡研究界的一項核心難題。
在今年的SIGCOMM會議上,在由美國工程院院士,普林斯頓大學教授Jennifer Rexford主辦的Self-Driving Networks Workshop中,阿里巴巴發表論文《Automatic Life Cycle Management of Network Configurations》,創新性提出了“網絡層次化模型”的概念,并且在阿里的全球網絡中首次證明了通過這樣一個統一的網絡模型,可以實現網絡配置的整個生命周期(包括配置生成,配置驗證,和配置變更)的全自動化,將網絡智能化的水平提升到前所未有的高度。
這表明阿里巴巴在網絡智能化運維方面已經和Google、亞馬遜、Facebook、微軟達到了同一高度,并且在網絡形式化驗證、快速故障恢復等方面開始彎道超車。
RDMA高性能網絡
與傳統TCP/IP網絡不同,RDMA提供的低延遲高帶寬能顯著提高機器學習、高性能存儲、大數據等應用的性能。然而RDMA在高性能的背后也存在著技術復雜性極高的難題。阿里巴巴是極少數能在生產網中大規模部署RDMA的公司之一。在今年SIGCOMM上,阿里巴巴高級技術專家劉洪強博士組織了Kernel Bypassing Networks Workshop以專門探討RDMA和智能網絡硬件技術的最新進展,并請來了Mellanox創始人Eitan Zahavi博士來做主題演講。Mellanox是RDMA網卡的領軍公司之一,阿里巴巴正在與Mellanox 等網卡廠商深度合作開發新一代RDMA硬件和流控算法。
阿里巴巴高級技術專家、計算機網絡領域著名華人學者劉洪強博士主持KBNet Workshop
Mellanox聯合創始人,杰出架構師Eitan Zahavi在KBNet做主題演講
網絡可視化
“阿里巴巴是網絡可視化技術的先驅。在豐富的業務形態和大規模網絡基礎設施的驅使下,阿里近年來積極與國際頂級網絡硬件廠商合作,推動產業生態和行業標準,主導設計了新一代硬件架構和接口,率先實現了網絡可視化的規模化部署,并正在此基礎上研究網絡架構的智能化設計、網絡故障的秒級恢復和下一代數據中心網絡流量調度系統,以大幅度提升數據中心網絡的帶寬利用率和穩定性。”
——阿里巴巴高級網絡架構師、數據中心網絡知名專家 曹捷
阿里在今年SIGCOMM的Industry Demo Session上展示了最新的網絡可視化成果,引起了學術界、互聯網公司、以及硬件廠商等的極大共鳴。
論文資料分享
《Automatic Life Cycle Management of Network Configurations》
《Elastic Sketch: Adaptive and Fast Network-Wide Measurements》
《Network Transparentization in Alibaba》
詳情請查詢:
https://conferences.sigcomm.org/sigcomm/2018
阿里研究員張銘博士
擔任技術委員會委員負責SIGCOMM論文評審,以及主會Network Verification Session主席
阿里高級技術專家劉洪強博士
擔任KBNets Workshop的技術委員會主席,負責統籌論文的審定和篩選工作
總結
以上是生活随笔為你收集整理的阿里基础设施技术亮相SIGCOMM 2018的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 从技术角度聊聊,短视频为何让人停不下来?
- 下一篇: 城市大脑背后的技术有哪些?