如何進(jìn)行mr與spark的比較,相信很多沒有經(jīng)驗的人對此束手無策,為此本文總結(jié)了問題出現(xiàn)的原因和解決方法,通過這篇文章希望你能解決這個問題。
成都網(wǎng)絡(luò)公司-成都網(wǎng)站建設(shè)公司創(chuàng)新互聯(lián)建站10年經(jīng)驗成就非凡,專業(yè)從事網(wǎng)站設(shè)計、成都網(wǎng)站建設(shè),成都網(wǎng)頁設(shè)計,成都網(wǎng)頁制作,軟文營銷,一元廣告等。10年來已成功提供全面的成都網(wǎng)站建設(shè)方案,打造行業(yè)特色的成都網(wǎng)站建設(shè)案例,建站熱線:18982081108,我們期待您的來電!
mr目前不支持DAG計算模型,Tez嘗試做這樣的優(yōu)化,但還不成熟。
spark 1.2.0之前的版本,shuffle有問題,不夠穩(wěn)定,1.2.0使用了netty4,據(jù)稱解決了問題,還沒有進(jìn)行嘗試。
spark生態(tài)圈更具優(yōu)勢,spark sql、spark streaming、spark graphx、spark mllib都基于spark core,之間可以無縫串聯(lián)。
spark更方便,spark-shell可以很快地進(jìn)行一些原型驗算。
hadoop更heavy也更穩(wěn)定。
看完上述內(nèi)容,你們掌握如何進(jìn)行mr與spark的比較的方法了嗎?如果還想學(xué)到更多技能或想了解更多相關(guān)內(nèi)容,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,感謝各位的閱讀!
新聞名稱:如何進(jìn)行mr與spark的比較
網(wǎng)站URL:http://chinadenli.net/article26/jiisjg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)頁設(shè)計公司、定制網(wǎng)站、關(guān)鍵詞優(yōu)化、定制開發(fā)、企業(yè)建站、軟件開發(fā)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)