當前位置:係統粉 > 電腦問答 > 其他問答 > windows安裝hadoop方法是什麼?

windows安裝hadoop方法是什麼?

提問者:一切都是灰白色  |  瀏覽 次  |  提問時間:2016-12-05  |  回答數量:3

windows安裝hadoop方法是什麼?完全分布式模式1. 配置etc/hosts文件,使主機名解析為IP 或者使用DNS服務解析主機名2. 建立hadoop運行用戶: useradd grid>passwd g...

已有3條答案
宋子申_

宋子申_

回答數:0  |  被采納數:0

2016-12-05 13:36:46
完全分布式模式
1. 配置etc/hosts文件,使主機名解析為IP 或者使用DNS服務解析主機名
2. 建立hadoop運行用戶: useradd grid>passwd grid
3. 配置ssh密碼連入: 每個節點用grid登錄,進入主工作目錄,ssh -keygen -t rsa生產公鑰,然後將每個節點的公鑰複製到同一個文件中,再將這個包含所有節點公鑰的文件複製到每個節點authorized_keys目錄,這個每個節點之間彼此可以免密碼連接
4. 下載並解壓hadoop安裝包
5. 配置namenode,修改site文件
6. 配置hadoop-env.sh
7. 配置masters和slaves文件
8. 向各個節點複製hadoop
9. 格式化namenode
10.啟動hadoop
11.用jps檢驗各後台進程是否成功啟動。
讚 0
拖拉機上的青春

拖拉機上的青春

回答數:0  |  被采納數:1

2016-12-05 13:31:14
單機模式standalone
單機模式是Hadoop的默認模式。當首次解壓Hadoop的源碼包時,Hadoop無法了解硬件安裝環境,便保守地選擇了最小配置。在這種默認模式下所有3個XML文件均為空。當配置文件為空時,Hadoop會完全運行在本地。因為不需要與其他節點交互,單機模式就不使用HDFS,也不加載任何Hadoop的守護進程。該模式主要用於開發調試MapReduce程序的應用邏輯。
讚 0
auroraaur

auroraaur

回答數:2  |  被采納數:1

2016-12-05 13:35:19
偽分布模式安裝
tar xzvf hadoop-0.20.2.tar.gz
Hadoop的配置文件:
conf/hadoop-env.sh 配置JAVA_HOME
core-site.xml 配置HDFS節點名稱和地址
hdfs-site.xml 配置HDFS存儲目錄,複製數量
mapred-site.xml 配置mapreduce的jobtracker地址

配置ssh,生成密匙,使到ssh可以免密碼連接
(RSA算法,基於因數不對稱加密:公鑰加密私鑰才能解密,私鑰加密公鑰才能解密)
cd /root
ssh -keygen -t rsa
cd .ssh
cp id_rsa.pub authorized_keys覆蓋公鑰,就能免密碼連接

啟動Hadoop bin/start-all.sh
停止Hadoop bin/stop-all.sh
讚 0
解決方法
版權信息

Copyright @ 2011 係統粉 版權聲明 最新發布內容 網站導航