Hadoop集群部署:https://www.cnblogs.com/Studywith/p/16948866.html

湖口網(wǎng)站制作公司哪家好，找創(chuàng)新互聯(lián)公司！從網(wǎng)頁設(shè)計(jì)、網(wǎng)站建設(shè)、微信開發(fā)、APP開發(fā)、響應(yīng)式網(wǎng)站設(shè)計(jì)等網(wǎng)站項(xiàng)目制作，到程序開發(fā)，運(yùn)營維護(hù)。創(chuàng)新互聯(lián)公司從2013年開始到現(xiàn)在10年的時(shí)間，我們擁有了豐富的建站經(jīng)驗(yàn)和運(yùn)維經(jīng)驗(yàn)，來保證我們的工作的順利進(jìn)行。專注于網(wǎng)站建設(shè)就選創(chuàng)新互聯(lián)公司。

一.Hive的三種部署模式

1.嵌入模式
使用內(nèi)嵌的Derby數(shù)據(jù)庫存儲(chǔ)元數(shù)據(jù)，是Hive最簡單的部署方式。嵌入模式下的Hive不支持多會(huì)話連接，不適合生產(chǎn)環(huán)境，只適合測試環(huán)境。
2.本地模式
使用本地獨(dú)立數(shù)據(jù)庫存儲(chǔ)元數(shù)據(jù)，這里的獨(dú)立數(shù)據(jù)庫通常使用MySQL數(shù)據(jù)庫。本地模式部署的Hive支持元數(shù)據(jù)共享，并且支持多會(huì)話連接。
3.遠(yuǎn)程模式
遠(yuǎn)程模式與本地模式一樣，同樣是使用獨(dú)立數(shù)據(jù)庫存儲(chǔ)元數(shù)據(jù)。不同的是，遠(yuǎn)程模式使用的是遠(yuǎn)端的獨(dú)立數(shù)據(jù)庫，而本地模式使用的是本地獨(dú)立數(shù)據(jù)庫。遠(yuǎn)程模式主要應(yīng)用于Hive客戶端較多的情況。

二.嵌入模式

1.下載安裝包+上傳+解壓

官網(wǎng):https://dlcdn.apache.org/hive/

這里下載的是apache-hive-2.3.9-bin.tar.gz,上傳到node01的/export/software/,解壓到/export/servers/

tar -zxvf /export/software/apache-hive-2.3.9-bin.tar.gz -C /export/servers/

2.系統(tǒng)環(huán)境變量

便于在各個(gè)文件夾下可以直接調(diào)用Hive

vim /etc/profile

HIVE_HOME=/export/servers/apache-hive-2.3.9-bin
PATH=$PATH:$HIVE_HOME/bin
export HIVE_HOME PATH

source /etc/profile

3.Hive配置文件

參考:https://blog.csdn.net/QYHuiiQ/article/details/124157773

(1)hive-env.sh

cd /export/servers/apache-hive-2.3.9-bin/conf
cp hive-env.sh.template hive-env.sh
vim hive-env.sh

export HIVE_CONF_DIR=/export/servers/apache-hive-2.3.9-bin/conf
export JAVA_HOME=/export/servers/jdk1.8.0_161
export HADOOP_HOME=/export/servers/hadoop-2.7.4
export HIVE_AUX_JARS_PATH=/export/servers/apache-hive-2.3.9-bin/lib

(2)hive-site.xml

cp hive-default.xml.template hive-site.xml
vim hive-site.xml

(命令的意思就是全文查找對(duì)應(yīng)符號(hào),將符號(hào)替換為指定符號(hào))
#1.將${system:java.io.tmpdir}替換為我們的tmp目錄(iotmp，該目錄會(huì)自動(dòng)創(chuàng)建)。直接在當(dāng)前模式下輸入以下命令即可替換，不需要切換為insert模式

:%s#${system:java.io.tmpdir}#/export/servers/apache-hive-2.3.9-bin/iotmp#g

#執(zhí)行完之后，會(huì)提示我們替換了4個(gè)地方。
 

#2.再將系統(tǒng)用戶名替換為root

:%s/${system:user.name}/root#g

#執(zhí)行完之后提示我們修改了3個(gè)地方。

4.初始化 Derby

在啟動(dòng)Hive之前需要在Hive的安裝目錄下進(jìn)行初始化Derby數(shù)據(jù)庫的操作，出現(xiàn)“schemaTool completed”信息，則證明成功初始化Derby數(shù)據(jù)庫。

cd /export/servers/apache-hive-2.3.9-bin/
bin/schematool -initSchema -dbType derby

5.啟動(dòng)Hadoop

必須先啟動(dòng)Hadoop再啟動(dòng)Hive

#node01,02,03分別依次執(zhí)行(具體見上文Hadoop執(zhí)行)
zkServer.sh start
zkServer.sh status
hadoop-daemon.sh start journalnode

#node01執(zhí)行
start-dfs.sh
start-yarn.sh

#完成后分別執(zhí)行jps查看啟動(dòng)情況

node01

node02

node03

6.啟動(dòng)Hive客戶端工具

執(zhí)行“hive”命令啟動(dòng)Hive客戶端工具HiveCLI?？梢詧?zhí)行“quit；”命令退出Hive客戶端工具HiveCLI，此時(shí)在Hive安裝目錄下會(huì)默認(rèn)生成文件derby.log和文件夾metastore_db。

另外兩種待更新~

你是否還在尋找穩(wěn)定的海外服務(wù)器提供商？創(chuàng)新互聯(lián)www.cdcxhl.cn海外機(jī)房具備T級(jí)流量清洗系統(tǒng)配攻擊溯源，準(zhǔn)確流量調(diào)度確保服務(wù)器高可用性，企業(yè)級(jí)服務(wù)器適合批量采購，新人活動(dòng)首月15元起，快前往官網(wǎng)查看詳情吧

分享名稱：大數(shù)據(jù)--Hadoop環(huán)境部署(5)Hive部署-創(chuàng)新互聯(lián)
文章轉(zhuǎn)載：http://chinadenli.net/article0/deseoo.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站設(shè)計(jì)公司、電子商務(wù)、外貿(mào)建站、網(wǎng)頁設(shè)計(jì)公司、網(wǎng)站內(nèi)鏈、軟件開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)