ID | 主機(jī)類型 | 主機(jī)名 | IP | 應(yīng)用軟件 | 操作系統(tǒng) | 硬件配置 |
---|---|---|---|---|---|---|
1 | 物理機(jī) | namenode01 | 192.168.1.200 | jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1 | CentOS7.4 | 6核CPU、8G內(nèi)存、250存儲(chǔ) |
2 | 物理機(jī) | datanode01 | 192.168.1.201 | jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1 | CentOS7.4 | 6核CPU、8G內(nèi)存、250存儲(chǔ) |
3 | 物理機(jī) | datanode02 | 192.168.1.202 | jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1 | CentOS7.4 | 6核CPU、8G內(nèi)存、250存儲(chǔ) |
4 | 物理機(jī) | datanode03 | 192.168.1.203 | jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1 | CentOS7.4 | 6核CPU、8G內(nèi)存、250存儲(chǔ) |
我這里規(guī)劃的角色不是太好,如果是四臺(tái)機(jī)器,建議大家按照我們下面的分配
創(chuàng)新互聯(lián)建站是一家集網(wǎng)站建設(shè),竹溪企業(yè)網(wǎng)站建設(shè),竹溪品牌網(wǎng)站建設(shè),網(wǎng)站定制,竹溪網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營(yíng)銷,網(wǎng)絡(luò)優(yōu)化,竹溪網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競(jìng)爭(zhēng)力??沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿,時(shí)刻以成就客戶成長(zhǎng)自我,堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。
修改四臺(tái)服務(wù)器的主機(jī)名。
192.168.1.200 namenode01 hbase01 spark01 hive01 cluster1
192.168.1.201 datanode01 hbase02 spark02 zk01 MySQL01
192.168.1.202 datanode02 hbase03 spark03 zk02
192.168.1.203 datanode03 hbase04 spark04 zk03
在namenode01節(jié)點(diǎn)上面進(jìn)行操作。
ssh-keygen -t rsa
ssh-copy-id namenode01
ssh-copy-id datanode01
ssh-copy-id datanode02
ssh-copy-id datanode03
創(chuàng)建用戶(4臺(tái)機(jī)器相同操作)
useradd hadoop && echo '123456' |passwd --stdin hadoop
使用命令visudo
設(shè)置用戶權(quán)限(4臺(tái)機(jī)器相同操作),添加如下內(nèi)容:
hadoop ALL=(ALL) ALL
下載JDK1.8,可以選擇下載rpm包,直接安裝即可使用。
https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html