一、mysql 數據導入到 hdfs
? sqoop ?? ??? ??? ?????????? ##sqoop命令
? ?? ?import ?? ??? ??? ?????????? ##表示導入
? ?? ?--connect jdbc:mysql://ip:3306/sqoop??? ##告訴jdbc，連接mysql的url
? ?? ?--username root???????????????????????????????????? ##連接mysql的用戶名
? ?? ?--password admin ?? ?????????????????????????????? ##連接mysql的密碼
? ?? ?--table mysql1??????????????????????????????????????? ##從mysql導出的表名稱
? ?? ?--fields-terminated-by '\t'??????????????????????? ##指定輸出文件中的行的字段分隔符，默認為逗號“,”
? ?? ?-m 1?????????????????????????????????????????????????????? ##復制過程使用1個map作業

二、mysql 數據導入到 hive

1),復制mysql表結構到hive
sqoop
??? create-hive-table
?? ?--connect jdbc:mysql://192.168.182.128:3306/test
?? ?--username root
?? ?--password root
?? ?--table user_dfs
?? ?--hive-table users
?? ?--fields-terminated-by '\t'

2),導入mysql的數據到hive中
sqoop? ##sqoop命令
??? import? ##表示導入
?? ?--connect jdbc:mysql://192.168.182.128:3306/test? ##告訴jdbc，連接mysql的url
?? ?--username root? ##連接mysql的用戶名
?? ?--password root? ##連接mysql的密碼
?? ?--table user_dfs? ##從mysql導出的表名稱
?? ?--hive-import?? ##把mysql表數據復制到hive空間中。如果不使用該選項，意味著復制到hdfs中 ?
?? ?--hive-table users?? ##hive 表名
?? ?--m 1?? ##復制過程使用1個map作業
?? ?--fields-terminated-by '\t' ##指定輸出文件中的行的字段分隔符
三,hive 數據導入mysql
sqoop ##sqoop命令
??? export? ##表示導入
?? ?--connect jdbc:mysql://192.168.182.128:3306/test? ##告訴jdbc，連接mysql的url
?? ?--username root? ##連接mysql的用戶名
?? ?--password root? ##連接mysql的密碼
?? ?--table user_hive? ##從mysql導出的表名稱
?? ?--export-dir /user/hive/warehouse/users/part-m-00000 ##實際上是把hdfs中的數據導入到mysql中
?? ?--m 1?? ##復制過程使用1個map作業
?? ?--input-fields-terminated-by '\t' ##指定輸出文件中的行的字段分隔符

轉載于:https://blog.51cto.com/cbg23/1726474

總結

以上是生活随笔為你收集整理的sqoop 使用的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。