簡(jiǎn)介：Dataphin發(fā)布V2.9.4.3版本升級(jí)多項(xiàng)產(chǎn)品能力，該版本在產(chǎn)品功能和用戶體驗(yàn)上都進(jìn)行了優(yōu)化和提升，旨在為用戶提供更完善的產(chǎn)品能力和體驗(yàn)，以加速企業(yè)數(shù)據(jù)中臺(tái)建設(shè)進(jìn)程。

-更多關(guān)于數(shù)智化轉(zhuǎn)型、數(shù)據(jù)中臺(tái)內(nèi)容請(qǐng)加入阿里云數(shù)據(jù)中臺(tái)交流群—數(shù)智俱樂(lè)部 和關(guān)注官方微信公總號(hào)（文末掃描二維碼或點(diǎn)此加入）

-阿里云數(shù)據(jù)中臺(tái)官網(wǎng) https://dp.alibaba.com/index

---

1 產(chǎn)品簡(jiǎn)介

Dataphin是阿里巴巴集團(tuán)OneData數(shù)據(jù)治理方法論基于內(nèi)部實(shí)踐的產(chǎn)品化輸出，一站式提供數(shù)據(jù)采、建、管、用全生命周期管理的能力，以助力企業(yè)顯著提升數(shù)據(jù)治理水平，構(gòu)建質(zhì)量可靠、消費(fèi)便捷、生產(chǎn)安全經(jīng)濟(jì)的企業(yè)級(jí)數(shù)據(jù)中臺(tái)。Dataphin提供多種計(jì)算引擎支持及可拓展的開(kāi)放能力，以適應(yīng)各行各業(yè)的平臺(tái)技術(shù)架構(gòu)和個(gè)性化訴求。

2 版本概覽

2021年6月，Dataphin發(fā)布V2.9.4.3版本，升級(jí)多項(xiàng)產(chǎn)品能力。

• 平臺(tái)能力上，拓展計(jì)算引擎豐富度和OpenAPI覆蓋度
• 數(shù)據(jù)集成模塊，拓展支持的MySQL數(shù)據(jù)源版本和一鍵建表覆蓋范圍，以提升配置效率
• 監(jiān)控能力上，優(yōu)化告警接收規(guī)則配置，提提升靈活性適配更多監(jiān)控場(chǎng)景
• 資產(chǎn)中心，優(yōu)化邏輯表預(yù)覽及敏感字段識(shí)別規(guī)則，完善資產(chǎn)鏈路
• 數(shù)據(jù)服務(wù)拓展API分頁(yè)查詢能力，以拓展查詢范圍，提升服務(wù)響應(yīng)效率和鏈接穩(wěn)定性

該版本在產(chǎn)品功能和用戶體驗(yàn)上都進(jìn)行了優(yōu)化和提升，旨在為用戶提供更完善的產(chǎn)品能力和體驗(yàn)，以加速企業(yè)數(shù)據(jù)中臺(tái)建設(shè)進(jìn)程。

3 新版本重點(diǎn)特性詳解

特性1：計(jì)算引擎新增支持CDH6

新增針對(duì)CDH6計(jì)算引擎的適配，以提升多引擎兼容能力；截至當(dāng)前版本，Dataphin支持的計(jì)算引擎類型包括：MaxCompute、CDH5、CDH6、EMR。

特性2：MySQL數(shù)據(jù)源支持8.x版本

目前，8.0是市面上比較主流且使用度較廣的MySQL數(shù)據(jù)庫(kù)版本。Dataphin在已經(jīng)支持MySQL 5.6和5.7數(shù)據(jù)源的基礎(chǔ)上，新增支持MySQL 8.0版本，可以在數(shù)據(jù)同步、數(shù)據(jù)服務(wù)等模塊基于該數(shù)據(jù)源進(jìn)行配置，以提升業(yè)務(wù)數(shù)據(jù)覆蓋度。

特性3：數(shù)據(jù)集成支持在Oracle目標(biāo)庫(kù)一鍵建表

支持在目Oracle目標(biāo)庫(kù)一鍵創(chuàng)建數(shù)據(jù)建表，以簡(jiǎn)化配置流程，提升數(shù)據(jù)同步配置效率。截至當(dāng)前版本，一鍵建表功能一共覆蓋4種目標(biāo)數(shù)據(jù)源：MaxCompute、Oracle、Hive、AnalyticDB for PostgreSQL。

特性4：任務(wù)運(yùn)行監(jiān)控和質(zhì)量監(jiān)控支持給不同的接收對(duì)象指定不同的告警和接收方式

升級(jí)前，針對(duì)所有選中的接收人，均需要配置相同的告警接收方式。升級(jí)至本版本后，針對(duì)不同的接收人類型，可以指定不同的接收方式，以根據(jù)實(shí)際情況實(shí)現(xiàn)區(qū)別告警。如：任務(wù)負(fù)責(zé)人需要了解自己所負(fù)責(zé)的任務(wù)運(yùn)行概況，但不需要立即處理異常情況，可以選擇短信告警；值班負(fù)責(zé)人需要及時(shí)發(fā)現(xiàn)異常并處理，可以選擇電話作為強(qiáng)提醒；項(xiàng)目管理員需要定期統(tǒng)計(jì)告警概況，可以選擇郵件告警以方便記錄和統(tǒng)計(jì)。

特性5：資產(chǎn)地圖新增邏輯表數(shù)據(jù)預(yù)覽功能、資產(chǎn)安全支持手動(dòng)觸發(fā)敏感字段識(shí)別

新增邏輯表預(yù)覽功能，針對(duì)有權(quán)限的字段，直接展示抽樣的數(shù)據(jù)記錄，若字段設(shè)置過(guò)脫敏規(guī)則，則僅展示脫敏后的數(shù)據(jù)；針對(duì)無(wú)權(quán)限的字段，提示“無(wú)權(quán)限”字樣并提供快捷申請(qǐng)的跳轉(zhuǎn)鏈接。結(jié)合該功能，Dataphin完善了邏輯表從研發(fā)到資產(chǎn)沉淀到消費(fèi)預(yù)覽的全鏈路，提升了建模體驗(yàn)。

默認(rèn)情況下，在資產(chǎn)安全模塊配置了敏感數(shù)據(jù)識(shí)別規(guī)則后，次日開(kāi)始每日定時(shí)進(jìn)行掃描。本次在每日定時(shí)掃描的基礎(chǔ)上，新增支持用戶手動(dòng)觸發(fā)敏感數(shù)據(jù)識(shí)別任務(wù)的運(yùn)行，以實(shí)現(xiàn)新增規(guī)則立即生效，以及臨時(shí)變更場(chǎng)景下的記錄及時(shí)更新，提升敏感數(shù)據(jù)識(shí)別覆蓋場(chǎng)景。

特性6：數(shù)據(jù)服務(wù)支持基于Impala數(shù)據(jù)源創(chuàng)建的API分頁(yè)查詢，以拓展查詢范圍，提升查詢穩(wěn)定性

歷史版本中，考慮到查詢性能，基于Impala數(shù)據(jù)源創(chuàng)建的的API單次查詢僅支持返回最大1000條結(jié)果，無(wú)法滿足大數(shù)據(jù)量查詢場(chǎng)景，影響下游業(yè)務(wù)使用。本次針對(duì)基于Impala數(shù)據(jù)源創(chuàng)建的API，提供分頁(yè)查詢能力，支持通過(guò)limit或offset語(yǔ)句設(shè)置分頁(yè)條件，以保證服務(wù)連接穩(wěn)定性和相應(yīng)效率，支持大數(shù)據(jù)量查詢的場(chǎng)景。

4 總結(jié)與展望

本次發(fā)布的V2.9.4.3版本中，Dataphin圍繞計(jì)算引擎、數(shù)據(jù)源、數(shù)據(jù)集成、監(jiān)控告警、數(shù)據(jù)服務(wù)進(jìn)行了功能迭代升級(jí)；在下一個(gè)版本中，我們將重點(diǎn)支持FusionInsight計(jì)算引擎適配、數(shù)據(jù)萃取升級(jí)、OpenAPI擴(kuò)展、運(yùn)維補(bǔ)數(shù)據(jù)能力提升、數(shù)據(jù)服務(wù)多項(xiàng)目等功能，敬請(qǐng)期待！

相關(guān)產(chǎn)品：智能數(shù)據(jù)構(gòu)建與管理Dataphin

---

數(shù)據(jù)中臺(tái)是企業(yè)數(shù)智化的必經(jīng)之路，阿里巴巴認(rèn)為數(shù)據(jù)中臺(tái)是集方法論、工具、組織于一體的，“快”、“準(zhǔn)”、“全”、“統(tǒng)”、“通”的智能大數(shù)據(jù)體系。

目前正通過(guò)阿里云對(duì)外輸出系列解決方案，包括通用數(shù)據(jù)中臺(tái)解決方案、零售數(shù)據(jù)中臺(tái)解決方案、金融數(shù)據(jù)中臺(tái)解決方案、互聯(lián)網(wǎng)數(shù)據(jù)中臺(tái)解決方案、政務(wù)數(shù)據(jù)中臺(tái)解決方案等細(xì)分場(chǎng)景。

其中阿里云數(shù)據(jù)中臺(tái)產(chǎn)品矩陣是以Dataphin為基座，以Quick系列為業(yè)務(wù)場(chǎng)景化切入，包括：

• - Dataphin，一站式、智能化的數(shù)據(jù)構(gòu)建及管理平臺(tái)；
• - Quick BI，隨時(shí)隨地 智能決策；
• - Quick Audience，全方位洞察、全域營(yíng)銷、智能增長(zhǎng)；
• - Quick A+， 跨多端全域應(yīng)用體驗(yàn)分析及洞察的一站式數(shù)據(jù)化運(yùn)營(yíng)平臺(tái)；
• - Quick Stock， 智能貨品運(yùn)營(yíng)平臺(tái)；
• - Quick Decision，智能決策平臺(tái)；

官方站點(diǎn)：

數(shù)據(jù)中臺(tái)官網(wǎng) https://dp.alibaba.com

釘釘溝通群和微信公眾號(hào)

原文鏈接：https://developer.aliyun.com/article/785197?

版權(quán)聲明：本文內(nèi)容由阿里云實(shí)名注冊(cè)用戶自發(fā)貢獻(xiàn)，版權(quán)歸原作者所有，阿里云開(kāi)發(fā)者社區(qū)不擁有其著作權(quán)，亦不承擔(dān)相應(yīng)法律責(zé)任。具體規(guī)則請(qǐng)查看《阿里云開(kāi)發(fā)者社區(qū)用戶服務(wù)協(xié)議》和《阿里云開(kāi)發(fā)者社區(qū)知識(shí)產(chǎn)權(quán)保護(hù)指引》。如果您發(fā)現(xiàn)本社區(qū)中有涉嫌抄襲的內(nèi)容，填寫(xiě)侵權(quán)投訴表單進(jìn)行舉報(bào)，一經(jīng)查實(shí)，本社區(qū)將立刻刪除涉嫌侵權(quán)內(nèi)容。

總結(jié)

以上是生活随笔為你收集整理的数据智能构建管理平台Dataphin V2.9.4.3版本发布的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。