這篇文章給大家分享的是有關(guān)hadoop如何實現(xiàn)偽分布安裝的內(nèi)容。小編覺得挺實用的,因此分享給大家做個參考,一起跟隨小編過來看看吧。
為橋東等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計制作服務(wù),及橋東網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務(wù)為網(wǎng)站建設(shè)、成都網(wǎng)站設(shè)計、橋東網(wǎng)站設(shè)計,以傳統(tǒng)方式定制建設(shè)網(wǎng)站,并提供域名空間備案等一條龍服務(wù),秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務(wù)。我們深信只要達(dá)到每一位用戶的要求,就會得到認(rèn)可,從而選擇與我們長期合作。這樣,我們也可以走得更遠(yuǎn)!
1.hadoop的偽分布安裝
1.1 設(shè)置ip地址
執(zhí)行命令 service network restart
驗證: ifconfig
1.2 關(guān)閉防火墻
執(zhí)行命令 service iptables stop
驗證: service iptables status
1.3 關(guān)閉防火墻的自動運行
執(zhí)行命令 chkconfig iptables off
驗證: chkconfig --list | grep iptables
1.4 設(shè)置主機(jī)名
執(zhí)行命令
(1)hostname hadoop
(2)vi /etc/sysconfig/network
1.5 ip與hostname綁定
執(zhí)行命令 vi /etc/hosts
驗證: ping hadoop
1.6 設(shè)置ssh免密碼登陸
執(zhí)行命令
(1)ssh-keygen -t rsa
(2)cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys
驗證: ssh hadoop
1.7 安裝jdk
執(zhí)行命令
(1)cd /usr/local
(2)chmod u+x jdk-6u24-linux-i586.bin
(3)./jdk-6u24-linux-i586.bin
(4)mv jdk-1.6.0_24 jdk
(5)vi /etc/profile 增加內(nèi)容如下:
export JAVA_HOME=/usr/local/jdk
export PATH=.:$JAVA_HOME/bin:$PATH
(6)source /etc/profile
驗證: java -version
1.8 安裝hadoop
執(zhí)行命令
(1)tar -zxvf hadoop-1.1.2.tar.gz
(2)mv hadoop-1.1.2 hadoop
(3)vi /etc/profile 增加內(nèi)容如下:
export JAVA_HOME=/usr/local/jdk
export HADOOP_HOME=/usr/local/hadoop
export PATH=.:$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH
(4)source /etc/profile
(5)修改conf目錄下的配置文件hadoop-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml
1.hadoop-env.sh export JAVA_HOME=/usr/local/jdk/
2.core-site.xml
<configuration> <property> <name>fs.default.name</name> <value>hdfs://hadoop:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop/tmp</value> </property> </configuration>
3.hdfs-site.xml
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.permissions</name> <value>false</value> </property> </configuration>
4.mapred-site.xml
<configuration> <property> <name>mapred.job.tracker</name> <value>hadoop:9001</value> </property> </configuration>
(6)hadoop namenode -format
(7)start-all.sh
驗證:
(1)執(zhí)行命令jps 如果看到5個新的java進(jìn)程,分別是NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker
(2)在瀏覽器查看,http://hadoop:50070 http://hadoop:50030
1.9 啟動時沒有NameNode的可能原因:
(1)沒有格式化
(2)環(huán)境變量設(shè)置錯誤
(3)ip與hostname綁定失敗
感謝各位的閱讀!關(guān)于“hadoop如何實現(xiàn)偽分布安裝”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,讓大家可以學(xué)到更多知識,如果覺得文章不錯,可以把它分享出去讓更多的人看到吧!
分享文章:hadoop如何實現(xiàn)偽分布安裝
網(wǎng)頁鏈接:http://chinadenli.net/article36/pijjsg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供外貿(mào)建站、軟件開發(fā)、動態(tài)網(wǎng)站、ChatGPT、搜索引擎優(yōu)化、標(biāo)簽優(yōu)化
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)