通過(guò)寫代碼的方式來(lái)操作hdfs,雖然hdfs是在linux里面搭建的,通過(guò)配置windows環(huán)境去連接linux,就可以操作hdfs。整個(gè)hadoop工作之時(shí)需要依賴windows操作系統(tǒng)的平臺(tái)。下載hadoop。
10年積累的成都網(wǎng)站設(shè)計(jì)、成都網(wǎng)站制作、外貿(mào)網(wǎng)站建設(shè)經(jīng)驗(yàn),可以快速應(yīng)對(duì)客戶對(duì)網(wǎng)站的新想法和需求。提供各種問(wèn)題對(duì)應(yīng)的解決方案。讓選擇我們的客戶得到更好、更有力的網(wǎng)絡(luò)服務(wù)。我雖然不認(rèn)識(shí)你,你也不認(rèn)識(shí)我。但先網(wǎng)站制作后付款的網(wǎng)站建設(shè)流程,更有沐川免費(fèi)網(wǎng)站建設(shè)讓你可以放心的選擇與我們合作。
第一點(diǎn)就是: windows上執(zhí)行mapreduce,必須打jar包到所有slave節(jié)點(diǎn)才能正確分布式運(yùn)行mapreduce程序。
使用百ubuntu命令打開(kāi)pycharm之前,你必須知道你的pycharm解壓度在哪個(gè)文件夾,然后進(jìn)入該文件夾,進(jìn)入bin目錄,里面版有個(gè)pycharm.sh的文件,權(quán)運(yùn)行./pycharm.sh就能打開(kāi)這個(gè)程序。
下載hadoop.dll、winutils.exe。配置環(huán)境變量JAVA_HOME和Path。配置Hadoop-Eclipse-Plugin,在啟動(dòng)Hadoop之前,確保Hadoop配置文件中core-site.xml文件中的localhost改為系統(tǒng)對(duì)于的IP,以及在這個(gè)hdfs-site.xml添加。
如果是linux系統(tǒng)的文件夾共享給windows訪問(wèn),需要架設(shè)samba服務(wù)。
文件夾位置是/root/tmp。那么你的hdfs的數(shù)據(jù)存儲(chǔ)在/root/tmp/dfs/data/current中。其中block是塊文件,也就是數(shù)據(jù)文件,.meta是元數(shù)據(jù)。hadoop是java寫的,因此hadoop存儲(chǔ)的數(shù)據(jù)的方式使用的也是java的方式。
安裝PSCP.EXE系統(tǒng)。下載的PSCP.EXE放在C盤-Windows-System32路徑下,傳輸文件命令pscp文件路徑用戶名。若出現(xiàn)報(bào)錯(cuò)加下端口號(hào)就可以解決了。
打開(kāi)vmware虛擬機(jī),點(diǎn)擊“虛擬機(jī)”,下拉菜單中選擇“安裝vmware工具”。此時(shí),Linux系統(tǒng)中光盤鏡像顯示Vmare Tools,打開(kāi)后,在vmware tools壓縮包上右鍵“解壓縮”。
第一步:cp VMwareTools-0-1846tar.gz /tmp,把這個(gè)文件拷貝到tmp下 第二步:cd /tmp進(jìn)入臨時(shí)目錄,ls 查看剛才的文件是否在這個(gè)目錄下。
在winddows下使用pscp工具。需要自己搜索pscp工具。linux下需要安裝ssh或者openssh。windows下安裝xshell或secureCrt工具,linux開(kāi)啟ssh服務(wù)并安裝lszrz軟件包。
windows下安裝xshell或secureCrt工具,linux開(kāi)啟ssh服務(wù)并安裝lszrz軟件包。xshell連上后,運(yùn)行sz或者rz命令,就可以在windows和linux系統(tǒng)之間傳輸文件了。linux系統(tǒng)只見(jiàn)可以直接用scp傳遞文件。
百度搜索“SSHSecureShellClient”下載并安裝。打開(kāi)我們安裝好的SSHSecureShellClient。
winscp的使用就很簡(jiǎn)單了,只需要選擇scp協(xié)議,并且輸入ssh登錄的用戶名和密碼,就可以開(kāi)始文件傳輸了;linux的scp命令用于在兩臺(tái)linux主機(jī)之間傳輸文件,也是需要ssh登錄用戶名、密碼,而命令的格式百度一下就知道了。
網(wǎng)站題目:包含pscp命令linux的詞條
分享地址:http://chinadenli.net/article19/degohgh.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供企業(yè)建站、建站公司、動(dòng)態(tài)網(wǎng)站、關(guān)鍵詞優(yōu)化、商城網(wǎng)站、虛擬主機(jī)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)