从核心技术到高可用实践——解密数据库深度挖掘指南
SDCC系列峰會各站在技術圈遍地花開之余,主辦方CSDN為了更好地服務技術開發者并拓展受眾,同步啟動SDCC 2017系列之線上峰會——線上線下雙管齊下,一舉打破地域限制,內容為基,便捷加成,帶來更友好的聽眾體驗。
數據庫作為最關鍵的基礎設施,滲透技術領域的方方面面。隨著互聯網應用的廣泛普及,海量數據的存儲及訪問成為系統設計的一大痛點。隨著各行各業對信息化管理的依賴日益加劇,企業對數據訪問的連續性提出了更高的要求,面對紛至沓來的穩定性及高可用需求,數據庫技術已然成為各領域信息化建設的關鍵一環。
2017年12月23日(周六),SDCC 2017之數據庫技術實戰線上峰會即將強勢來襲。作為SDCC系列技術峰會的一部分,本次線上峰會秉承干貨實料(案例)的內容原則,邀請了來自阿里巴巴、騰訊、微博、網易等多家企業的數據庫專家及高校研究學者,將圍繞Oracle、MySQL、PostgreSQL、Redis等熱點數據庫技術展開,從核心技術的深挖到企業內部實踐的剖析,打造精華壓縮解析式分享,舉一反三,思辨互搏,專為業界同好獨家訂制。他山之石,可以攻玉,數據庫高可用秘辛,抑或是大數據場景下數據庫技術的突破方向?你或許都可以在這里找到答案。除此之外,每個演講時段后均設有答疑交流環節,一對一互動交流。更多峰會詳情,請點擊「閱讀原文」查看。
日前,數據庫技術實戰線上峰會也公布了完整版日程及講師議題超長預告,高能預警,請勿眨眼:
講師&議題介紹
演講主題:MySQL/TDSQL事務處理技術
個人簡介:李海翔,網名那海藍藍,熟悉PostgreSQL、MySQL、Informix等數據庫內核技術。騰訊金融云數據庫技術專家。著有《數據庫查詢優化器的藝術》,被譽為查詢優化技術領域的里程碑之作。2017年出版《數據庫事務處理的藝術 事務管理與并發控制》,被再次譽為事務處理領域的新里程碑。
主題簡介:以事務處理技術為主題,全面、系統地分享MySQL的事務處理技術,包括MySQL事務處理技術的系統架構、ACID的實現方式、各種數據異常的避免技術、以及與其他主流數據庫在事務處理技術方面的相同與不同之處。
分享大綱:
1. MySQL的事務處理技術概述?
????1.1 事務鎖與系統鎖?
????1.2 ACID特性實現
2. MySQL的并發訪問控制技術?
????2.1 事務管理模型?
????2.2 一致性?
????2.3 隔離性?
????2.4 原子性和持久性
3. 主流數據庫的事務處理技術
適合人群:
1. 內核開發人員
2. DBA
3. 數據庫技術愛好者
聽眾受益:
1. 對MySQL數據庫的事務處理技術能全面、系統地進行掌握和了解
2. 能深入了解主流數據庫與MySQL事務處理方面的異同
演講主題:DDB進化論:從數據庫到數據中心
個人簡介:馬進,來自網易杭研大數據平臺組,入職以來先后參與了分布式數據庫DDB,緩存NKV,網易數據運河NDC等項目,目前是DDB項目負責人,主導數據庫中間件的各種項目研發。專注于分布式系統架構與數據庫技術,熱衷于構建高效的,高性能的分布式后臺應用。
主題簡介:過去十年,是互聯網井噴式發展的十年,十年前,為了應對博客近千萬的日活,我們研發了分布式數據庫DDB,為網易眾多互聯網應用提供透明分庫分表服務;十年后,考拉,云音樂等產品爆發式的體量對我們產品在易用性,可用性和可靠性上提出了更大挑戰:第一是要求我們有更加平臺化,一站式的管理工具,提供更加靈活和場景化的在線擴容,數據遷移等功能;第二是圍繞機房搭建異地多活的體系架構,實現底層數據庫在極端情況下的可靠性切換;第三是將數據庫中的數據通過簡單配置,導向異構數據系統,打通OLTP與OLAP的壁壘,異或將數據庫的增量變更訂閱到應用端,通過數據驅動業務。未來的一段時間,我們將見證DDB從軟件形態逐漸蛻變為圍繞應用結構化數據的中心平臺,我們拭目以待。
分享大綱:
1. DDB架構演化之路:介紹DDB系統11年來的版本更迭,架構演變
2. 網易數據運河NDC:簡單介紹NDC系統的功能和架構
3. 結構化數據中心Galaxy:從應用場景,產品形態和架構方面闡述數據中心Galaxy的理念和概念,Galaxy=DDB+NDC
4. 總結
聽眾受益:通過了解DDB,NDC的功能形態,架構設計,可以開闊聽眾眼界,幫助拓寬聽眾在中間件設計哲學的思路,加深聽眾對分庫分表等相關領域的理解,另外本次分享的結構化數據中心理念,相信會使聽眾耳目一新。
演講主題:MySQL高可用運營
個人簡介:莫曉東,微信支付高級DBA,目前專注社交支付存儲層架構和優化,多年數據層架構設計和運維經驗。負責過早期騰訊手機游戲和增值業務數據庫平臺建設,擁有豐富的MySQL集群建設和高可用運營經驗。
主題簡介:現在是數據層架構的變革期,數據規模的不斷增長和數據云的不斷發展,MySQL在其中起到了越來越重要的作用。在多年的DBA工作歷程中,經歷了數據層架構的變革,從單實例到高可用的數據庫集群。這里向大家分享我在數據庫運營中遇到的一些問題和數據庫架構的演變情況。主要分享MySQL數據庫集群的高可用實現、騰訊的數據庫架構和業界優秀高可用數據架構的情況。
分享大綱:
1. 為什么選擇MySQL
2. 高可用和一致性
3. 分布式數據庫
4. 數據庫到存儲云
適合人群:使用MySQL的技術人員
聽眾受益:
1. 對MySQL數據庫的事務處理技術能全面、系統地進行掌握和了解
2. 能深入了解主流數據庫與MySQL事務處理方面的異同
演講主題:微博熱點事件背后的數據庫運維心得
個人簡介:張冬洪,微博研發中心高級DBA,Redis中國用戶組主席,多年Linux和數據庫運維經驗,專注于MySQL和NoSQL架構設計與運維以及自動化平臺的開發;目前在微博主要負責Feed核心系統相關業務的數據庫運維和業務保障工作。
主題簡介:微博作為當今中文社交媒體的第一品牌,擁有超過3.76億的月活用戶,也是當前社會熱點事件傳播的最主要平臺,其中包括但不限制于大型活動、春晚、明星動態等,而熱點事件往往具有不可預見性和突發性,并且伴隨著極短時間內流量的數倍增長,甚至更多,有時持續時間較長。在大數據量,高并發場景下如何快速應對突發流量的沖擊,確保線上服務的穩定性,一線老兵親臨解讀其背后的數據庫運維心得。
聽眾受益:
1. 了解微博熱點事件這類場景下數據庫運維面臨的挑戰
2. 了解大數據量、高并發場景下的數據庫運維常用策略和手段
3. 了解微博數據庫運維體系建設
演講主題:PostgreSQL流計算案例
個人簡介:周正中,一枚PGer,PostgreSQL 中國社區發起人之一。PostgreSQL 中國社區大學發起人之一。公益是一輩子的事,Just do it。
主題簡介:在物聯網、證券、實時監控、經營分析等場景,常見海量feed寫入,數據實時計算場景可以用更少的硬件,更高的效率解決實時大屏,實時統計,實時異動響應等需求。本次分享將介紹采用PostgreSQL在這些場景的應用案例。
適合人群:DBA、開發、架構師
演講主題:Kubernetes存儲技術分享及其在數據庫場景下的應用
個人簡介:金戈,沃趣科技高級技術專家,負責沃趣科技所有產品線監控系統的研發工作,負責沃趣科技RDS的原型開發工作,精通監控系統架構設計與開發,致力于自動化智能化IT基礎設施平臺建設,有多年系統運維和監控系統開發經驗。
主題簡介:介紹Kubernetes存儲相關原理和技術,并以數據庫RDS為視角介紹在真實場景下的應用。
????1. 僅以存儲視角介紹Kubernetes集群編排系統
????2. 并將無狀態和有狀態應用對比分享有狀態應用在實現上的難點
????3. 深入Kubernetes源碼,了解實現存儲子系統的幾個重要模塊
????4. 結合數據庫RDS應用分享實踐
分享大綱:
1. 僅以存儲視角介紹Kubernetes集群編排系統,
2. 并將無狀態和有狀態應用對比分享有狀態應用在實現上的難點,
3. 深入Kubernetes源碼,了解實現存儲子系統的幾個重要模塊
4. 結合數據庫RDS應用分享實踐
適合人群:程序員、架構師,和運維工程師
聽眾受益:
1. 了解Kubernetes
2. 深入理解Kubernetes的存儲技術
3. 了解如何在Kubernetes上編排有狀態容器
演講主題:數據倉庫與HDFS的列存儲技術
個人簡介:卞昊穹,中國人民大學2012級博士研究生,研究方向為數據庫系統和實時數據分析,從事SQL-on-Hadoop系統測試和開發。在HDFS列存儲優化、高性能數據索引和裝載、分布式等值連接算法、海量知識庫擴充等方面的研究成果發表在SIGMOD、CIKM等國際頂級學術會議上。
主題簡介:傳統數據倉庫中,存儲格式是關系到數據查詢性能的最重要因素之一,也是數據分析系統設計和研發的基礎。在大數據時代,基于Hadoop的Spark/Hive/Presto等SQL on Hadoop系統借助HDFS優秀的擴展性,也借鑒了傳統數據倉庫中的現有技術,發展成為大數據查詢分析的主流工具。列存儲作為這些面向分析的系統中所必須支持的標準數據存儲技術,經過多年的發展,已經成為數據分析人員必須深入理解的基本技術。本演講將和大家分享列存儲技術的基本概念、技術要點和最新的現狀。
分享大綱:
1. 數據存儲格式概述?
????1.1 數據倉庫與大數據分析系統的發展歷程?
????1.2 列存儲與行存儲?
????1.3 混合存儲
2. 數據倉庫中的列存儲技術?
????2.1 C-Store?
????2.2 Vertica?
????2.3 GreenPlum
3. HDFS列存儲技術?
????3.1 RC File?
????3.2 ORC和Parquet?
????3.3 Carbondata
4. 列存儲研究前沿
適合人群:熟悉HDFS基本原理,了解SQL on Hadoop的大數據初學者和從業人員
聽眾受益:幫助聽眾從入門的角度理解列存儲技術和其他存儲技術之間的關系,列存儲技術的優點和使用場景,幫助聽眾在實際的數據分析中更好地使用列存儲技術,幫助聽眾了解列存儲技術的研究和實際應用的前沿。
如何參與:
關于本次峰會的更多詳情,歡迎大家掃描下方二維碼入群交流,或點擊左下角「閱讀原文」,報名參加!
總結
以上是生活随笔為你收集整理的从核心技术到高可用实践——解密数据库深度挖掘指南的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 农行转账农行多久到账
- 下一篇: 病历智能处理引擎的架构设计、实现和应用