真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

如何進行hue安裝以及hivehdfsoozie集成

如何進行hue安裝以及hive hdfs oozie集成,相信很多沒有經(jīng)驗的人對此束手無策,為此本文總結(jié)了問題出現(xiàn)的原因和解決方法,通過這篇文章希望你能解決這個問題。

創(chuàng)新互聯(lián)建站專注于黃埔網(wǎng)站建設(shè)服務(wù)及定制,我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供黃埔營銷型網(wǎng)站建設(shè),黃埔網(wǎng)站制作、黃埔網(wǎng)頁設(shè)計、黃埔網(wǎng)站官網(wǎng)定制、微信小程序服務(wù),打造黃埔網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供黃埔網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。

[toc]

環(huán)境需求

  • jdk

  • maven

  • git

  • 第三方依賴 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyrus-sasl-gssapi openssl-devel MySQL-devel sqlite-devel gmp-devel libffi-devel npm 還有缺失什么可自行安裝

創(chuàng)建hue用戶和用戶組

groupadd hue

useradd -g hue hue

切換用戶并進入hue根目錄

su hue

cd ~

從git上拉取hue源碼

git clone https://github.com/cloudera/hue.git

進入hue-master目錄并編譯

cd hue-master

make apps 需要等待較長時間,若中間還缺少依賴可自行安裝

修改hue配置文件

vi /home/hue/hue-master/desktop/conf/pseudo-distributed.ini

時區(qū)

[desktop]

time_zone=Asia/Shanghai

用戶角色

[desktop]

server_user=hue

server_group=hue

default_user=hue

hdfs配置

[hadoop]

[[hdfs_clusters]]

fs_defaultfs=hdfs://集群名稱

webhdfs_url=http://hdfsMaster1:14000/webhdfs/v1

yarn配置

[hadoop]

[[yarn_clusters]]

[[[default]]]

resourcemanager_host=resourcemanager

resourcemanager_api_url=http://resourcemanager:8088

submit_to=True

proxy_api_url=http://172.19.131.104:8088

history_server_api_url=http://172.19.131.104:19888

database配置

(hue數(shù)據(jù)庫先創(chuàng)建好并授予權(quán)限給hue用戶) [database]

engine=mysql

host=mysqlhost

port=3306

user=hue

password=123456

name=hue

oozie配置(已默認可不配)

[oozie]

remote_data_dir=/user/hue/oozie/workspaces

enable_cron_scheduling=true

enable_document_action=true

liboozie配置

[liboozie]

oozie_url=http://master1:11000/oozie

beeswax配置(hive)

[beeswax]

hive_server_host=172.19.131.107

hive_server_port=10000

數(shù)據(jù)庫初始化

/home/hue/hue-master/build/env/bin/hue syncdb

/home/hue/hue-master/build/env/bin/hue migrate

運行

/home/hue/hue-master/build/env/bin/supervisor

問題解決

若hdfs路徑無法訪問

在hadoop的core-site配置文件下配置 hadoop.proxyuser.hue.groups=*

hadoop.proxyuser.hue.hosts=*

若hive數(shù)據(jù)庫無法訪問

可以在權(quán)限管理那里(本人用的是ranger)進行hive的數(shù)據(jù)庫授權(quán)

若oozie提交任務(wù)執(zhí)行失敗

可查看MapReduce的日志,可能是當前用戶無法提交任務(wù)配置信息到y(tǒng)arn下的目錄

看完上述內(nèi)容,你們掌握如何進行hue安裝以及hive hdfs oozie集成的方法了嗎?如果還想學到更多技能或想了解更多相關(guān)內(nèi)容,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,感謝各位的閱讀!


標題名稱:如何進行hue安裝以及hivehdfsoozie集成
文章出自:http://weahome.cn/article/jcpodp.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部