1、hadoop:由java語言開發的開源的分佈式計算平臺。可提供PB(100萬G)存儲。hadoop是可靠的,高效的,可伸縮的。
hadoop假設計算元素和存儲會失敗,維護多個副本,確保針對失敗的節點重分佈處理。文件以塊的方式存儲.
2、hadoop最核心的是hdfs和mapreduce,hdfs爲海量存儲提供存儲。mapreduce爲海量數據提供計算。mapreduce分爲jobtrackers和taskreduce組成。
3、hadoop集羣包含一個master和若干個slave角色。master稱爲namenode節點,slave爲datanode節點。
4、hdfs命令
hdfs namenode -format:格式化hdfs文件系統
start-all.sh: 啓動集羣
jps: 查看節點進程
查看master統計信息和hdfs存儲信息:http://masterip:50070
hadoop fs -普通命令: 管理hdfs文件命令
hdfs dfsadmin -report:查看節點狀態信息
hdfs dfsadmin -safemode enter|leave|get 開啓|關閉|查看 安全模式,在安全模式下只可查看不可寫入
Hadoop安裝與部署
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
hadoop一步步入門
lcyuanjiang
2019-02-23 13:59:15
高標準機房綜合配線安裝
wbzjacky
2019-02-24 13:12:38
VMware Tools 安裝、卸載及配置
如沐陽光
2019-02-24 13:00:22
Oracle11g 基於linux 6.3下安裝
love壁虎
2019-02-24 12:55:06
apache安裝(1)
flashhand
2019-02-23 13:58:28
Centos下安裝php5.3.10
flashhand
2019-02-23 13:58:28
CentOS 5.5 下安裝 Mysql 5.5
flashhand
2019-02-23 13:58:27
vmlite虛擬機圖文安裝教程
lhslllj
2019-02-23 13:50:59
IBMDB2數據庫軟件安裝教程
王澤民
2019-02-23 13:48:07
PXE網絡全自動安裝Linux
LQ_112
2019-02-23 13:47:18
關於Linux下oracle的顯示中文亂碼或不完整
781732825
2019-02-23 13:43:04
SQL 2008 R2安裝部署及端口開放
vip2008
2019-02-23 13:42:18
Windows 7 安裝時候提示,無法更改啓動項安裝失敗,以及msr分區
781732825
2019-02-23 13:39:40
部署遠程協助項目小感
lhs8609
2019-02-23 13:43:30
組策略之(2)-------部署Bginfo軟件,桌面顯示用戶端信息
czq2008sky
2019-02-23 13:38:34