hdfs啟動后的三個進(jìn)(jìn)程
攸享13510773900咨詢： 二十叫廿,三十叫卅,四十叫卌,五十呢?六十呢?七十呢…… -
蒼南縣蝕回復(fù)：
______ 二十叫廿、三十叫卅、四十叫卌、五十為圩、 六十為圓、七十為進(jìn) 一、圩 拼音:[ xū ] 釋義: 1、南方一些地區(qū)稱集市:趕~(趕集). 2、意為五十,如:圩一(五十一) 拼音:[ wéi ] 1、防水護(hù)田的堤岸. 2、有圩圍住的地區(qū):~田.鹽~. 3...
攸享13510773900咨詢： 怎么把hdfs上的一個log壓縮成lzo -
蒼南縣蝕回復(fù)：
______ 有三個選項:-c 指示刪除已經(jīng)存在當(dāng)前目錄的同名文件,這往往是為了刪除舊的副本而制定的,-d 指示最后階段刪除當(dāng)前目錄里中間文件,因為我們會把文件從hdfs中g(shù)et出來-i 指示輸出一些交互信息,如果你cat出來的內(nèi)容要用作它用,那么你不要使用這個選項
攸享13510773900咨詢： sbin/start - dfs.sh, sbin/start - yarn.sh之后輸入jps 為什么只有五個進(jìn)程 沒有 ResourceManager -
蒼南縣蝕回復(fù)：
______ jps不算的,關(guān)閉hdfs和yarn,在命令行輸入jps就有jps.沒有 ResourceManager,個人覺得是因為配置的問題.
攸享13510773900咨詢： 如何快速判斷hadoop是否安裝成功? -
蒼南縣蝕回復(fù)：
______ 1. 登陸hdfs的web界面(默認(rèn)端口50070),如果界面顯示namenode正常,datanode也在線上,容量也正常,則說明安裝成功; 2. 往hdfs里面寫入文件,如果寫入成功,則安裝成功; 3. 啟動yarn,如果啟動成功
攸享13510773900咨詢： hadoop 中一個大文件 在hdfs中是如何存儲的 -
蒼南縣蝕回復(fù)：
______ 文件是按照塊來存儲的,比如配置的每塊大小為64M,那么5G的文件,會分成5*1024/64=80塊,每個塊會在不同節(jié)點上存多份.你上面說的依次寫入datanode,是指將每個塊依次寫入. 讀取的時候,也是一塊一塊來讀的,當(dāng)然,這些都已經(jīng)被HDFS的客戶端封裝好了,你看到就是在讀一個文件.
攸享13510773900咨詢： 請問在Hadoop的HDFS中,是如何把文件分割后的block分散到一個個的datanode中,有源代碼的相關(guān)方法說明最好 -
蒼南縣蝕回復(fù)：
______ (1)文件分割后,會有一個 文件 --> block的映射,這個映射是持久化到硬盤中的,具體的映射關(guān)系表是在FSNamesystem.java中構(gòu)建的(該部分的構(gòu)建使用的是FSDirectory.java的功能,filename - blockset);有了文件到塊的映射表就可以通過文...
