用戶行爲數據採集 第2節 基準測試

上篇:用戶行爲數據採集 第1節 日誌生成代碼編寫


1、Hadoop安裝

詳見:hadoop集羣搭建(完全分佈式詳細版)

1)集羣規劃:

服務器flink105 服務器flink106 服務器flink107
HDFS NameNode DataNode DataNode DataNode SecondaryNameNode
Yarn NodeManager Resourcemanager NodeManager NodeManager

注意:儘量使用離線方式安裝


2、項目經驗之HDFS存儲多目錄

1)確認HDFS的存儲目錄,保證存儲在空間最大硬盤上

[root@Flink105 mapreduce]# df -h
Filesystem               Size
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章