about 9 years ago
已經有新版本的安裝練習了可以參考新的
Hadoop2.6偽分佈式安裝
0.準備軟體&環境
CentOS-6.5-i386-bin-DVD1.iso
jdk-6u45-linux-i586.bin
hadoop-2.2.0.tar.gz
虛擬機四台,如下
電腦名稱 | IP | 執行的服務 |
---|---|---|
master | 192.168.200.101 | NameNode、SecondaryNameNode、ResourceManager |
slave1 | 192.168.200.102 | DataNode、NodeManager |
slave2 | 192.168.200.103 | DataNode、NodeManager |
slave3 | 192.168.200.104 | DataNode、NodeManager |
因為裝在64位元系統上會有要不要重新編譯的問題,所以這邊僅用32位元安裝
參考來源
about 9 years ago
延續前一篇請看這邊 安裝 Hadoop 2.2 完全分布式
0.準備軟體&環境
zookeeper-3.4.5.tar.gz
hbase-0.96.1.1-hadoop2-bin.tar.gz
虛擬機四台加上之前運行的Hadoop,架構上如下
電腦名稱 | IP | Hadoop的服務 | Zookeeper的服務 | HBase的服務 |
---|---|---|---|---|
master | 192.168.200.101 | NameNode、SecondaryNameNode、ResourceManager | QuorumPeerMain | HMaster |
slave1 | 192.168.200.102 | DataNode、NodeManager | X | HRegionServer |
slave2 | 192.168.200.103 | DataNode、NodeManager | X | HRegionServer |
slave3 | 192.168.200.104 | DataNode、NodeManager | X | HRegionServer |
about 9 years ago
如果你也安裝完這兩篇完全分佈式安裝Hadoop、完全分佈式安裝Zookeeper與HBase
那接下來可以開發HBase的應用程式了
0 準備軟體&環境
Eclipse Java EE IDE for Web Developers. Version: Kepler Release 下載去
hbase-0.96.1.1-hadoop2-bin.tar.gz 下載去
almost 9 years ago
練習安裝Mahout跟驗證
1.準備環境
CentOS-6.5-x64
jdk-6u45-linux-i586.bin
hadoop-2.2.0.tar.gz
可參考之前安裝Hadoop完全分散式
2.安裝 Mahout 0.9
使用hduser帳戶
sudo wget http://apache.osuosl.org/mahout/0.9/mahout-distribution-0.9.tar.gz
sudo tar zxvf mahout-distribution-0.9.tar.gz
export MAHOUT_HOME=/opt/mahout-distribution-0.9
export PATH=$MAHOUT_HOME/bin:$PATH
about 8 years ago
這次練習用Hadoop2.6來安裝
安裝後看起來也可以正常跑在x64上,因為沒有出現錯誤提示
OS:CentOS 7
JDK:8u25
Hadoop:2.6
about 8 years ago
Spark1.2.0 for Hadoop 2.4 or later的版本安裝
Spark安裝比Hadoop簡單很多,但是要記得先安裝Scala啊