這篇文章主要介紹“怎么在windows下開(kāi)發(fā)mapreduce”,在日常操作中,相信很多人在怎么在windows下開(kāi)發(fā)mapreduce問(wèn)題上存在疑惑,小編查閱了各式資料,整理出簡(jiǎn)單好用的操作方法,希望對(duì)大家解答”怎么在windows下開(kāi)發(fā)mapreduce”的疑惑有所幫助!接下來(lái),請(qǐng)跟著小編一起來(lái)學(xué)習(xí)吧!
成都創(chuàng)新互聯(lián)公司長(zhǎng)期為1000多家客戶提供的網(wǎng)站建設(shè)服務(wù),團(tuán)隊(duì)從業(yè)經(jīng)驗(yàn)10年,關(guān)注不同地域、不同群體,并針對(duì)不同對(duì)象提供差異化的產(chǎn)品和服務(wù);打造開(kāi)放共贏平臺(tái),與合作伙伴共同營(yíng)造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為西湖企業(yè)提供專業(yè)的網(wǎng)站建設(shè)、成都網(wǎng)站建設(shè),西湖網(wǎng)站改版等技術(shù)服務(wù)。擁有十載豐富建站經(jīng)驗(yàn)和眾多成功案例,為您定制開(kāi)發(fā)。
1、首先在map/reduce locations 中右鍵new一個(gè)hadoop location,如下圖是創(chuàng)建好了的,如果是第一次,不會(huì)有myhadoop。
2、配置

這里面的location name 是隨便起的名字,host 是hadoop配置文件core-site.xml中的fs.defaultFS的url的主機(jī)ip,右邊的port,是fs.defaultFS的url的端口號(hào),user name 是linux系統(tǒng)使用hadoop的用戶名
3、如果成功,則可以展開(kāi)左邊的目錄,能夠看到hdfs上的文件,如果看不到目錄,第一時(shí)間看看你的hadoop集群?jiǎn)?dòng)了么,別犯這種低級(jí)的錯(cuò)誤哦

4、試一試能不能刪除里面文件,如果不能,可能會(huì)涉及到權(quán)限的問(wèn)題,修改集群配置文件hdfs-site.xml
<property> <name>dfs.permissions</name> <value>false</value> </property>
5、新建一個(gè)mapreduce工程,會(huì)自動(dòng)把需要的jar包都引進(jìn)來(lái),然后寫個(gè)wordcount小程序吧,這里就不寫了,右鍵這個(gè)類,選擇run as configration

配置好mainclass 點(diǎn)選項(xiàng)卡Arguments

填寫好運(yùn)行的參數(shù),第一個(gè)為輸入目錄,第二個(gè)為輸出目錄,配置好后run as hadoop 就可以在左側(cè)目錄樹(shù)下看到ouput文件夾
到此,關(guān)于“怎么在windows下開(kāi)發(fā)mapreduce”的學(xué)習(xí)就結(jié)束了,希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí),快去試試吧!若想繼續(xù)學(xué)習(xí)更多相關(guān)知識(shí),請(qǐng)繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編會(huì)繼續(xù)努力為大家?guī)?lái)更多實(shí)用的文章!
本文標(biāo)題:怎么在windows下開(kāi)發(fā)mapreduce
網(wǎng)頁(yè)鏈接:http://chinadenli.net/article28/jigocp.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供企業(yè)網(wǎng)站制作、自適應(yīng)網(wǎng)站、面包屑導(dǎo)航、品牌網(wǎng)站建設(shè)、品牌網(wǎng)站制作、全網(wǎng)營(yíng)銷推廣
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)