免费观看又色又爽又黄的小说免费_美女福利视频国产片_亚洲欧美精品_美国一级大黄大色毛片

hadoop啟動時報錯怎么辦-創新互聯

本篇內容主要講解“hadoop啟動時報錯怎么辦”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“hadoop啟動時報錯怎么辦”吧!

成都創新互聯公司服務項目包括岳陽網站建設、岳陽網站制作、岳陽網頁制作以及岳陽網絡營銷策劃等。多年來,我們專注于互聯網行業,利用自身積累的技術優勢、行業經驗、深度合作伙伴關系等,向廣大中小型企業、政府機構等提供互聯網行業的解決方案,岳陽網站推廣取得了明顯的社會效益與經濟效益。目前,我們服務的客戶以成都為中心已經輻射到岳陽省份的部分城市,未來相信會繼續擴大服務區域并繼續獲得客戶的支持與信任!

問題: hadoop啟動的時候報錯

HTTP ERROR 500 
Problem accessing /nn_browsedfscontent.jsp. Reason: 

Cannot issue delegation token. Name node is in safe mode. 
The reported blocks 0 needs additional 10 blocks to reach the threshold 0.9990 of total blocks 10. 
Safe mode will be turned off automatically 

Caused by: 
org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot issue delegation token. Name node is in safe mode.

理論:
Hadoop的安全模式
在分布式文件系統啟動的時候,開始的時候會有安全模式,當分布式文件系統處于安全模式的情況下,文件系統中的內容不允許修改也不允許刪除,直到安全模式結束。安全模式主要是為了系統啟動的時候檢查各個DataNode上數據塊的有效性,同時根據策略必要的復制或者刪除部分數據塊。運行期通過命令也可以進入安全模式。在實踐過程中,系統啟動的時候去修改和刪除文件也會有安全模式不允許修改的出錯提示,只需要等待一會兒即可。

在hadoop集群的時候,集群的運行會進入到安全模式(safeMode)下。在安全模式下運行一段時間后,自動退出。
1.那么,系統在安全模式下干什么了?
當集群啟動的時候,會首先進入到安全模式。系統在安全模式下,會檢查數據塊的完整性。假設我們設置的副本數(即參數dfs.replication)是5,那么在dataNode上就應該有5個副本存在,假設只存在3個副本,那么比率就是3/5=0.6。
在配置文件hdfs-default.xml中定義了一個最小的副本率,見圖7-1
我們的副本率0.6明顯小于0.999,因此系統會自動的復制副本到其他dataNode,爭取是的最小副本率>=0.999。如果系統中有8個副本,超過我們設定的5個副本,那么系統也會刪除多于的3個副本。

2.安全模式對我們有什么影響?
這時,不允許客戶端進行任何修改文件的操作,包括上傳文件、刪除文件、重命名、創建文件夾等操作。比如,創建文件時,在源代碼中就有對安全模式的判斷,如圖7-2
當我們在安全模式下進行修改文件操作時,會報出如下錯誤.
正常情況下,安全模式會運行一段時間自動退出的。只需要我們稍等一會就可以了。到底等多長時間哪,我們可以通過50070端口查看安全模式退出的剩余時間,如圖7-4。
雖然不能進行修改文件的操作,但是可以瀏覽目錄結構、查看文件內容的。

3.我們可以控制是否進入或者退出安全模式嗎?
在命令行下是可以控制安全模式的進入、退出和查看的,
命令hadoop fs –safemode get 查看安全模式狀態
命令hadoop fs –safemode enter 進入安全模式狀態
命令hadoop fs –safemode leave 離開安全模式狀態
安全模式,是hadoop集群的一種保護機制,在啟動時,最好是等待集群自動退出,然后再進行文件操作。


解決:

方法一:

safemode模式
NameNode在啟動的時候首先進入安全模式,如果datanode丟失的block達到一定的比例(1-dfs.safemode.threshold.pct),則系統會一直處于安全模式狀態即只讀狀態。

hadoop dfsadmin -safemode leave

有兩個方法離開這種安全模式
1. 修改dfs.safemode.threshold.pct為一個比較小的值,缺省是0.999。
2. hadoop dfsadmin -safemode leave命令強制離開

方法二:

jps查看各個節點啟動的進程
hadoop-daemon.sh start XX資源名 XX節點名

查看日志(若資源端口被占用,如50010端口被占用)
可以將占用此端口的程序殺掉或是更改hdfs-site.xml中的<name>dfs.datanode.address</name><value>0.0.0.0:50010</value>
殺掉進程釋放端口方法:
1、netstat -tln | grep 50010,查看這個端口使用情況;
2、lsof -i:50010,顯示是哪個程序占用此端口
3、kill -9 進程的PID,殺掉這個進程,重啟節點服務即可。

補充:
dfsadmin -safemode value 來操作安全模式,參數value的說明如下:
enter - 進入安全模式
leave - 強制NameNode離開安全模式
get - 返回安全模式是否開啟的信息
wait - 等待,一直到安全模式結束。

到此,相信大家對“hadoop啟動時報錯怎么辦”有了更深的了解,不妨來實際操作一番吧!這里是創新互聯網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續學習!

網站欄目:hadoop啟動時報錯怎么辦-創新互聯
本文URL:http://m.newbst.com/article24/dcihce.html

成都網站建設公司_創新互聯,為您提供網站策劃品牌網站制作虛擬主機搜索引擎優化App設計云服務器

廣告

聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯

成都做網站