在之前的大數(shù)據(jù)學(xué)習(xí)系列中,搭建了Hadoop+Spark+HBase+Hive 環(huán)境以及一些測(cè)試。其實(shí)要說(shuō)的話,我開始學(xué)習(xí)大數(shù)據(jù)的時(shí)候,搭建的就是集群,并不是單機(jī)模式和偽分布式。至于為什么先寫單機(jī)的搭建,是因?yàn)樽鳛閭€(gè)人學(xué)習(xí)的話,單機(jī)已足以,好吧,說(shuō)實(shí)話是自己的電腦不行,使用虛擬機(jī)實(shí)在太卡了。。。
整個(gè)的集群搭建是在公司的測(cè)試服務(wù)搭建的,在搭建的時(shí)候遇到各種各樣的坑,當(dāng)然也收獲頗多。在成功搭建大數(shù)據(jù)集群之后,零零散散的做了寫筆記,然后重新將這些筆記整理了下來(lái)。于是就有了本篇博文。
其實(shí)我在搭建的時(shí)候,并不是按部就班的搭建,中間或多或少都更改過(guò)不少,試驗(yàn)出來(lái)了目前沒啥問題的集群搭建。在寫本文的時(shí)候,開始準(zhǔn)備將環(huán)境在一臺(tái)機(jī)器上搭建,然后全部傳輸?shù)狡渌麢C(jī)器上。但是想了想,這樣或許在搭建環(huán)境的時(shí)候快速,但是對(duì)于閱讀者來(lái)說(shuō),不太友好。于是便拆分出來(lái)了,單獨(dú)搭建一個(gè)也是可以的。好了,廢話就少說(shuō)了,教程如下。
[TOC]
目前成都創(chuàng)新互聯(lián)已為上千余家的企業(yè)提供了網(wǎng)站建設(shè)、域名、虛擬主機(jī)、網(wǎng)站改版維護(hù)、企業(yè)網(wǎng)站設(shè)計(jì)、利州網(wǎng)站維護(hù)等服務(wù),公司將堅(jiān)持客戶導(dǎo)向、應(yīng)用為本的策略,正道將秉承"和諧、參與、激情"的文化,與客戶和合作伙伴齊心協(xié)力一起成長(zhǎng),共同發(fā)展。
這次因?yàn)槭羌捍罱ǎ栽诃h(huán)境配置方面,我使用一張表格來(lái)大致描述。集群使用了3臺(tái)機(jī)器,分別是master、slave1、slave2,通過(guò)名稱命名就可以知道主從關(guān)系了。使用的操作系統(tǒng)是CentOS6.8,具體各個(gè)機(jī)器安裝的配置如下表格:
若成功顯示該界面,則啟動(dòng)成功。
因?yàn)閔ive安裝使用不需要集群,只需在一臺(tái)機(jī)器上安裝使用就可以了,之前在我的
大數(shù)據(jù)學(xué)習(xí)系列之四 ----- Hadoop+Hive環(huán)境搭建圖文詳解(單機(jī)) http://www.panchengming.com/2017/12/16/pancm61/ 里面已經(jīng)講解的很詳細(xì),所以本文就不在描述了。
環(huán)境搭建參考: http://blog.csdn.net/pucao_cug/article/details/72773564
環(huán)境配置參考的官方文檔。
到此,本教程就結(jié)束了,謝謝閱讀!
版權(quán)聲明:
作者:虛無(wú)境
博客園出處:http://www.cnblogs.com/xuwujing
CSDN出處:http://blog.csdn.net/qazwsxpcm
個(gè)人博客出處:http://www.panchengming.com
原創(chuàng)不易,轉(zhuǎn)載請(qǐng)標(biāo)明出處,謝謝!
當(dāng)前名稱:大數(shù)據(jù)學(xué)習(xí)系列之七-----Hadoop+Spark+Zookeeper+HBase+Hive集
轉(zhuǎn)載來(lái)源:http://chinadenli.net/article46/jgpceg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站導(dǎo)航、App設(shè)計(jì)、全網(wǎng)營(yíng)銷推廣、網(wǎng)站策劃、品牌網(wǎng)站建設(shè)、面包屑導(dǎo)航
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)