未来ET大脑将如何打造可编程城市
摘要:在12月20日召開的云棲大會北京峰會上,由阿里云ET大腦架構師陳鵬宇帶來了以ET大腦為主題的演講,從開發者的角度講述了ET大腦的概念,介紹了ET大腦技術體系架構、數據資源平臺、AI服務平臺技術體系架構以及對ET大腦未來的發展需求做了介紹。
?
以下為精彩視頻整理:
?
ET大腦技術體系架構
七年前加入阿里巴巴,在這七年里經歷了阿里巴巴從傳統的BI走向數據智能,走向數據作用于業務的過程。最近三年也見證了ET大腦的技術和產品,從阿里巴巴的內部沉淀,到走向行業去服務于政府和企業。作為一名開發者也是ET大腦最早的使用者和產品的見證者,下面想和大家分享一下什么是ET大腦。
ET大腦是為了幫助政府和企業完成數字化轉型的一個創新平臺,這個創新平臺最核心的要素有三點,一是計算,計算幫助實現了在海量數據下計算的能力,數據中臺首次將數據當成一種資源。數據中臺的存在是為了創造業務中未知的可能性并且去激活它。數據中臺如果從業務的角度來定義它,它其實是對業務的激活。而傳統的數據倉庫部門是業務的支持者,而數據中臺的部門是業務的賦能者,甚至可以成為一個盈利中心。二是數據,數據是讓我們看到互聯網和IOT的時代,有機會把所有的數據都匯聚起來并且反補于業務;三是算法,算法則為ET大腦記錄了智慧。
ET大腦技術體系架構
以城市大腦為例介紹一下ET大腦技術體系架構。城市大腦背后的智能引擎并不是簡單的AI技術,在海量、多元的數據融合之后,要從這些數據里去挖掘出復雜場景下的關系,所以我們構建了內腦認知的網絡結構。然后采用多體智能的技術,從超時空的關系里面去實時的發現模式。城市大腦是對整個城市的交通狀態進行實時的洞察和調配,這個是任何人類的智慧都沒有辦法做到的,所以這也是城市大腦在智能這一板塊的創新。同時把數據和智能的能力開放出來,讓整個城市可編程。正如城市大腦的締造者王堅博士所說:“城市大腦其實是用數據資源來對城市資源進行優化和調節”,所以我們希望城市的所有資源都是可編程的元素,讓我們通過ET大腦的開放平臺去打造一座可編程的城市。
數據資源平臺(DRP):ET大腦的供血系統
數據資源是ET大腦的重要環節,所以數據資源平臺至關重要堪稱ET大腦的供血系統。把它可以分為四個層面分別為:全域數據匯聚技術、數據融合加工工藝、數據治理方法體系、數據開放共享機制。
我們為ET大腦配置了全鏈路數據監控,從數據的進入到最后的數據應用產出。一旦發現有問題的數據或者有異常的指標可以做到實時的攔截,這樣就給予系統很大的容錯能力和排除問題的時間窗口。
對于做數據的人來說,都很渴望看到數據的價值,所以我們有了數據價值圖譜。在數據價值圖譜上從底層的數據開始,每一份數據的用處都會清楚的呈現出來,可以去量化和評估一個數據對業務的價值,同時可以全面的對價值鏈路上出現的問題做出診斷和評估。另一個問題是數據的交換和共享。目前大部分的數據交換都還是最傳統的解法即信息交換,這樣對低敏感的小數據量的情況下是可行的,而ET大腦要解的是不要讓數據脫離計算。ET大腦持有大量的數據,需要解決的是在一個大的平臺里面讓政府和企業內部所有的數據匯聚之后,如何在多個部門間去共享數據的問題。還有一個很關心的問題是數據安全。大量的數據放在一起來用,還要追求共享、開放、交換,要怎樣去保障安全。我們在數據存儲環節、數據分析環境和最后數據出口的時候,都有不同的安全措施來管控,這是對內的管理。對外是靠阿里云的云盾去防止外部的攻擊。
?
AI服務平臺技術體系架構
我們把AI比喻成ET大腦的神經網絡,把阿里的、阿里云的所有的AI通過一個開放的框架去面向開發者開放,有離線的算法,也有在線的API。這套平臺一是可以做到跨異構的數據源去讀取數據。二是基于底層的數據做的算法流程是可以跨計算引擎去調度的。有了這兩點之后阿里巴巴將沉淀下來的一百多種通用的機器學習的算法以及在語音圖像、自然語言理解方面的這些算法注入到這個平臺里面去向開發者開放。最后通過這個平臺訓練出來的算法模型,可以實現一鍵部署和運行,并且對運行的過程、調試的過程進行評估、跟蹤、對bug進行優化,實現了一個全鏈路的服務。
處理數據資源平臺和算法平臺之外,對于ET大腦還有一個利器即DataV,現在DataV在3D城市的實時繪制方面沉淀了很領先的技術,我們希望DataV能更好的去扶持開發者,所以我們今年將啟動一個千萬級別的生態扶持計劃,我們也希望能支持到開發者去成立自己的工作團隊,在數據可持續這方面做出更多的應用。
?
ET大腦未來的發展需求
有了ET大腦的平臺,那么在DT時代什么樣的開發者才是一名合格的開發者,為什么數據在業務上沒有辦法被很好的應用,是因為懂業務的人一般不懂技術,或者是對數據的作用沒有認知。而懂技術的人往往不愿意深入的去了解業務。這種情況下,我們也許能很好的滿足已知的、說的清楚的需求,但沒有辦法去做到創新、去激發未知的業務需求。所以需要開發者深入到車間去了解業務。要真正把技術放到業務場景里去錘煉,在業務場景里去看到底哪些數據是有價值的。
?
ET大腦重新定義了Developer,相信未來的城市開發商的主體會是DT的代碼工作者,今天寫出來的程序明天就會成為這個城市資源的開發商。今天代碼里調動的是cpu里面的內存、硬盤、網絡,但是未來我們的程序里面調動的是城市里的土地資源、公共服務資源、人才資源、公交資源等。相信未來的開發者是可以和業務走的非常近的,未來的技術人員可以不是業務的支持者,或者它可以激發新的業務,所以這是ET大腦非常令人興奮的地方。我們也希望大家能夠看到新的機會,而阿里云的ET大腦會在背后為各位開發者提供能量。
本文由云棲社區志愿者小組smile小太陽整理,毛鶴審校。編輯:郭雪梅。
總結
以上是生活随笔為你收集整理的未来ET大脑将如何打造可编程城市的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: C语言学习笔记1——C语言程序
- 下一篇: 机器学习之降维(特征选择与特征提取)