這篇文章給大家分享的是有關(guān)Sqoop如何安裝、配置及基礎(chǔ)使用的內(nèi)容。小編覺得挺實(shí)用的，因此分享給大家做個(gè)參考，一起跟隨小編過來看看吧。

讓客戶滿意是我們工作的目標(biāo)，不斷超越客戶的期望值來自于我們對這個(gè)行業(yè)的熱愛。我們立志把好的技術(shù)通過有效、簡單的方式提供給客戶，將通過不懈努力成為客戶在信息化領(lǐng)域值得信任、有價(jià)值的長期合作伙伴，公司提供的服務(wù)項(xiàng)目有：域名注冊、網(wǎng)絡(luò)空間、營銷軟件、網(wǎng)站建設(shè)、九龍坡網(wǎng)站維護(hù)、網(wǎng)站推廣。

12. Sqoop

此主題介紹Sqoop的安裝、配置及基礎(chǔ)使用。

Sqoop基本信息

官網(wǎng)：http://sqoop.apache.org/
官方文檔：http://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html

12.1. 安裝 

wget http://mirror.bit.edu.cn/apache/sqoop/1.4.6/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
rm -rf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha ./frameworks/sqoop

12.2. 配置

vi ~/.profile

export SQOOP_HOME=/opt/workspaces/frameworks/sqoop

source ~/.profile

vi ./frameworks/sqoop/conf/sqoop-env.sh

export HADOOP_COMMON_HOME=/opt/workspaces/frameworks/hadoop
export HADOOP_MAPRED_HOME=/opt/workspaces/frameworks/hadoop
export HIVE_HOME=/opt/workspaces/frameworks/hive

下載MySQL驅(qū)動(dòng)

wget -P ./frameworks/sqoop/lib http://central.maven.org/maven2/mysql/mysql-connector-java/5.1.36/mysql-connector-java-5.1.36.jar

12.3. 測試

./frameworks/sqoop/bin/sqoop version

12.4. 使用

從MySQL數(shù)據(jù)庫導(dǎo)入數(shù)據(jù)

./frameworks/sqoop/bin/sqoop import --connect jdbc:mysql://:/hive \
 --username hive --password hive \
 --table ROLES \
 --where 1=1 \
 --hive-import --hive-table hive_role

# 如何要啟用增量導(dǎo)入需要加上如下參數(shù)
--incremental lastmodified --check-column  --last-value ''

感謝各位的閱讀！關(guān)于“Sqoop如何安裝、配置及基礎(chǔ)使用”這篇文章就分享到這里了，希望以上內(nèi)容可以對大家有一定的幫助，讓大家可以學(xué)到更多知識(shí)，如果覺得文章不錯(cuò)，可以把它分享出去讓更多的人看到吧！