十年網(wǎng)站開發(fā)經(jīng)驗 + 多家企業(yè)客戶 + 靠譜的建站團隊
量身定制 + 運營維護+專業(yè)推廣+無憂售后,網(wǎng)站問題一站解決
這篇文章給大家分享的是有關(guān)Sqoop如何使用的內(nèi)容。小編覺得挺實用的,因此分享給大家做個參考,一起跟隨小編過來看看吧。

創(chuàng)新互聯(lián)專注于鎮(zhèn)海網(wǎng)站建設(shè)服務(wù)及定制,我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供鎮(zhèn)海營銷型網(wǎng)站建設(shè),鎮(zhèn)海網(wǎng)站制作、鎮(zhèn)海網(wǎng)頁設(shè)計、鎮(zhèn)海網(wǎng)站官網(wǎng)定制、微信小程序服務(wù),打造鎮(zhèn)海網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供鎮(zhèn)海網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。
Sqoop是一款開源的工具,主要用于Hadoop(Hive)與傳統(tǒng)的數(shù)據(jù)庫(MySQL、postgresql...)間進行數(shù)據(jù)的傳遞.
Sqoop是一個用來將Hadoop和關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)相互轉(zhuǎn)移的工具,可以將一個關(guān)系型數(shù)據(jù)庫(例如:Mysql,Oracle,Postgres等)中的數(shù)據(jù)導(dǎo)進到Hadoop的HDFS中,也可以將HDFS的數(shù)據(jù)導(dǎo)進到關(guān)系型數(shù)據(jù)庫中.
Sqoop導(dǎo)入mysql數(shù)據(jù)庫運行過程依賴mysql-connector-java-*.jar
列出mysql數(shù)據(jù)庫中的所有數(shù)據(jù)庫
sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password admin
連接mysql并列出數(shù)據(jù)中的表
sqoop list-tables --connect jdbc:mysql://localhost:3306/test --username root --password admin
將關(guān)系型數(shù)據(jù)庫的表結(jié)構(gòu)復(fù)制到hive中,只是復(fù)制表的結(jié)構(gòu),表中的內(nèi)容沒有復(fù)制過去.
sqoop create-hive-table --connect jdbc:msql://localhost:3306/test --table sqoop_test --username root --password admin
使用sqoop把數(shù)據(jù)從rdbms導(dǎo)入到hdfs中
sqoop import --connect jdbc:mysql://hadoop:3306/test --username root --password admin --table user --fields-terminated-by '\t' -m
注意:test是數(shù)據(jù)庫名稱
使用sqoop把數(shù)據(jù)從hdfs導(dǎo)出到mysql中
sqoop export --connect jdbc:mysql://hadoop0:3306/test --username root --password admin --table user --fields-terminated-by '\t' --export-dir '/user/root/user'
注意:/user/root/user下面有一個數(shù)據(jù)文件:sort里面的數(shù)據(jù)對于這數(shù)據(jù)庫表中user的字段.
感謝各位的閱讀!關(guān)于“Sqoop如何使用”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,讓大家可以學(xué)到更多知識,如果覺得文章不錯,可以把它分享出去讓更多的人看到吧!