sqoop——将mysql数据库的数据表导入到hdfs上
生活随笔
收集整理的這篇文章主要介紹了
sqoop——将mysql数据库的数据表导入到hdfs上
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
sqoop是用來將mysql數(shù)據(jù)庫上的內(nèi)容導(dǎo)入到hdfs,或者將hdfs上的數(shù)據(jù)導(dǎo)入mysql的(相互之間轉(zhuǎn)化)一個工具。
前提:開啟hdfs、yarn服務(wù),關(guān)閉safe模式
(1)首先,在mysql上創(chuàng)建測驗表:
(2)檢查是否開啟任務(wù)
(3)使用命令將表插入:
ps:命令為sqoop import 后面跟要連接的mysql地址和數(shù)據(jù)庫,后面寫上mysql名稱和密碼,再加上表名,最后m后面跟的數(shù)字表示拆成幾個MR任務(wù),此次我選擇一個。
(4)驗證結(jié)果
用yarn可視化查看MR任務(wù)成功:
如果大家對細(xì)節(jié)有什么疑問或者補充,歡迎批評指正,一起努力!
總結(jié)
以上是生活随笔為你收集整理的sqoop——将mysql数据库的数据表导入到hdfs上的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: hive(4)——元数据概述
- 下一篇: 记录Hbase bug——org.apa