最近我遇到過一次solr的文件權(quán)限問題，導致索引崩潰。同事也遇到一次FS的類似現(xiàn)象問題。多次經(jīng)歷發(fā)現(xiàn)hadoop目前對目錄的權(quán)限管理有同步問題。

商丘網(wǎng)站建設公司成都創(chuàng)新互聯(lián)公司,商丘網(wǎng)站設計制作，有大型網(wǎng)站制作公司豐富經(jīng)驗。已為商丘上千家提供企業(yè)網(wǎng)站建設服務。企業(yè)網(wǎng)站搭建\成都外貿(mào)網(wǎng)站建設要多少錢，請找那個售后服務好的商丘做網(wǎng)站的公司定做！

正常情況下，以某個用戶啟動，則目錄權(quán)限會變成該用戶。至于用戶所在的組，可以直接忽略，沒有看到用處。但是有時候會出現(xiàn)這樣的情形。明明運行程序是超級用戶，也就是缺省使用hdfs用戶（如果有設置缺?。强梢栽L問solr, 權(quán)限的目錄，而且一直穩(wěn)定運行。

 

但是某一天，也許你忽然想改變一些配置。重啟了一些應用。也許就忽然它就權(quán)限變更了。除非你用正確的用戶啟動，并修正權(quán)限所帶來的問題，否則就不能訪問。經(jīng)歷過兩次，一次是cloudear solr(solrcloud)的問題。另外一次是hdfs的一個擴展應用程序，文件系統(tǒng)時遇到。都是開始能用，在進行目錄清理，或者是配置變更，重啟某些應用后忽然就不能用了。象是延遲發(fā)作的地雷。延時爆炸的雷。

 

仔細想了一下hadoop整個兒的機制，hdfs系統(tǒng)的機制，還有l(wèi)inux文件系統(tǒng)管理機制。 最后想，可能是這個原因。 

 

hdfs 文件系統(tǒng)，主要是nameserver, 它在管理權(quán)限時并不會立即生效，除非你手機用chmod改權(quán)限。它有一個更新數(shù)據(jù)的觸發(fā)條件。在此之前，所有文件都是可以跨權(quán)限訪問的。而且它也允許這么 做。這是因為避免過快的同步，提高文件系統(tǒng)的管理效率。也減少了同步造成的一系列問題。嚴格的說，它的權(quán)限同步是“人為手工”觸發(fā)的。除非你明確的說，我需要僅限變更，否則它不更新。

 

這樣以來，所有已啟動的進程，所有namenode里已經(jīng)在活動狀態(tài)的文件，都可以跨權(quán)限訪問了。 但是在偶爾的情況下，它會觸發(fā)權(quán)限同步，造成后來的應用忽然就不能訪問，顯示為目錄無權(quán)限。

 

此時需要手工更新所有的目錄權(quán)限，建議同時重新啟動所有服務節(jié)點，所有相關(guān)應用。

當前文章：hadoophdfs訪問權(quán)限更新延遲問題
當前路徑：http://chinadenli.net/article22/jeiijc.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供App設計、微信小程序、Google、網(wǎng)站設計公司、外貿(mào)建站、網(wǎng)站策劃

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)