Sqoop ETL工具的基本操作

查看 sqoop命令說(shuō)明

sqoop help

創(chuàng)新互聯(lián)建站是一家成都網(wǎng)站設(shè)計(jì)、做網(wǎng)站，提供網(wǎng)頁(yè)設(shè)計(jì)，網(wǎng)站設(shè)計(jì)，網(wǎng)站制作，建網(wǎng)站，定制網(wǎng)站建設(shè)，網(wǎng)站開(kāi)發(fā)公司，于2013年開(kāi)始是互聯(lián)行業(yè)建設(shè)者，服務(wù)者。以提升客戶品牌價(jià)值為核心業(yè)務(wù)，全程參與項(xiàng)目的網(wǎng)站策劃設(shè)計(jì)制作，前端開(kāi)發(fā)，后臺(tái)程序制作以及后期項(xiàng)目運(yùn)營(yíng)并提出專業(yè)建議和思路。

查看某一個(gè)命令的使用說(shuō)明：

sqoopcammond -help

從orange，mysql到hdfs

sqoop import --connect jdbc:oracle:thin:@192.168.1.254:1521:orcl --username bd_user  --password bd_user  --table GS_B_GY_DWCPNYXHBJG_S —target-dir '/user/haha/' -m 1

sqoop import --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root --password root --table gbi_pd_log—target-dir /user/hehe -m 1

從oracle，mysql到hive

sqoop import-all-tables --connect jdbc:oracle:thin:@192.168.1.232:14231:xe --username bhl_user --password bhl_user --hive-database bhl_user -m 1 --create-hive-table --hive-import—hive-overwrite

 sqoop import --connect jdbc:oracle:thin:@192.168.1.232:14231:xe --username bhl_user --password bhl_user—table BD_ECO_TX_2015_0516

sqoop import --connect jdbc:oracle:thin:@192.168.1.232:14231:xe --username bhl_user --password bhl_user --table BD_ECO_TX_2015_0516—hive-import—hive-database bhl_user -m 1(oracle連接的截圖在這就不寫(xiě)了，下面是mysql的測(cè)試)

======================================================================

列出數(shù)據(jù)庫(kù)：

sqoop list-databases --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root --password root

列出bigdatamanager數(shù)據(jù)庫(kù)中的表

sqoop list-tables --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root --password root

從mysql到hive

 sqoop import --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root—password root—table insurance_yearcost -hive-import

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn，海內(nèi)外云服務(wù)器15元起步，三天無(wú)理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

網(wǎng)站欄目：SqoopETL工具的基本操作-創(chuàng)新互聯(lián)
標(biāo)題網(wǎng)址：http://weahome.cn/article/djcgei.html