原创 Kafka消息隊列

Kafka 基礎篇消息隊列的概念使用消息隊列的場景分析異步消息發送:系統間解耦合Kafka 架構Kafka集羣安裝準備工作安裝Zookeeper集羣確保Kafka集羣的正常運行Kafka安裝步驟啓動服務測試Topic 和 日誌生產

原创 Storm 運行jar出錯:org.apache.storm.thrift.TApplicationException: getLeader failed: unknownre result

編寫完storm的java代碼準備在集羣環境運行測試,結果報錯: 起初以爲是代碼的錯誤,結果檢查半天也沒錯誤 後來去UIServer看集羣狀態,發現有節點宕掉了。 最後:重啓機羣,重新執行 storm jar storm-low

原创 大數據學習(3)-Hadoop 高可用HA-HDFS分佈式集羣搭建及使用

HDFS分佈式集羣搭建【高級版】HDFS集羣要保證NameNode的高可用性,爲了讓NameNode更安全,這裏選擇用ZooKeeper集羣來保證環境及準備zookeeper集羣的搭建HA-HDFS分佈式集羣搭建 HDFS集羣要保