這篇文章主要講解了“hive與hadoop有什么聯(lián)系”,文中的講解內(nèi)容簡(jiǎn)單清晰,易于學(xué)習(xí)與理解,下面請(qǐng)大家跟著小編的思路慢慢深入,一起來(lái)研究和學(xué)習(xí)“hive與hadoop有什么聯(lián)系”吧!

創(chuàng)新互聯(lián)建站從2013年開(kāi)始,先為興慶等服務(wù)建站,興慶等地企業(yè),進(jìn)行企業(yè)商務(wù)咨詢服務(wù)。為興慶企業(yè)網(wǎng)站制作PC+手機(jī)+微官網(wǎng)三網(wǎng)同步一站式服務(wù)解決您的所有建站問(wèn)題。
解析:
1、提交sql 交給驅(qū)動(dòng)
2、驅(qū)動(dòng)編譯:解析相關(guān)的字段表信息
3、去metastore查詢相關(guān)的信息 返回字段表信息
4、編譯返回信息 發(fā)給驅(qū)動(dòng)
5、驅(qū)動(dòng)發(fā)送一個(gè)執(zhí)行計(jì)劃 交給執(zhí)行引擎
6、執(zhí)行計(jì)劃 (三種形式: metastore、namenode、metastore+namenode+mapreduce)
形式一 > DDL 對(duì)數(shù)據(jù)庫(kù)表的操作的 直接和metastore交互 。 比如:create table t1(name string);
形式二 > dfs ops 直接和namenode取數(shù)據(jù) 。 比如: select * from t1;
形式三 > 把job交給job tracker,讓task tracker執(zhí)行 返回執(zhí)行信息 + 完成job返回?cái)?shù)據(jù)信息、找namenode查數(shù)據(jù) 。
比如:select * from t1 where col=X ;
7、返回結(jié)果信息集
總結(jié): hive 運(yùn)行在 hadoop 之上, 某些操作需要調(diào)用 hdfs 中的 mapreduce 。 hive 元數(shù)據(jù)存儲(chǔ)在 matestore 中, 而非元數(shù)據(jù)(如 table 里的數(shù)據(jù))存儲(chǔ)在hdfs之上。
感謝各位的閱讀,以上就是“hive與hadoop有什么聯(lián)系”的內(nèi)容了,經(jīng)過(guò)本文的學(xué)習(xí)后,相信大家對(duì)hive與hadoop有什么聯(lián)系這一問(wèn)題有了更深刻的體會(huì),具體使用情況還需要大家實(shí)踐驗(yàn)證。這里是創(chuàng)新互聯(lián),小編將為大家推送更多相關(guān)知識(shí)點(diǎn)的文章,歡迎關(guān)注!
當(dāng)前名稱:hive與hadoop有什么聯(lián)系
標(biāo)題網(wǎng)址:http://chinadenli.net/article40/gsjjeo.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供自適應(yīng)網(wǎng)站、網(wǎng)站收錄、微信小程序、網(wǎng)站導(dǎo)航、網(wǎng)站設(shè)計(jì)公司、定制開(kāi)發(fā)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)