原创 ssh免密碼連接設置
本例中演示通過ssh免密碼連接到dc01,dc01的登錄用戶名爲hadoop，端口爲1122. 1、生產公鑰 ssh-keygen -t rsa # 連續三次回車,即在本地生成了公鑰和私鑰,不設置密碼 2、複製公鑰到目標主機 ssh-c
2018-08-26 21:16:56
原创 當storm報錯：Could not find leader nimbus from seed hosts ["127.0.0.1"]解決辦法
解決方式： 刪除zookeeper下的storm節點數據，重啓zookeeper，重新發布topology到storm集羣即可。 zk操作方式： 首先到zookeeper目錄/bin下面，執行 ./bin/zkCli.sh -ser
2018-08-26 21:16:53
5
原创 maven項目打jar包時包含依賴
在pom文件中加入如下配置即可： <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-shade-plugin</artifactI
2018-08-26 21:16:53
原创 Java Api操作Kafka
執行下述操作前需要先部署kafka環境，參考kafka環境部署 1、添加maven依賴 <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka
2018-08-26 21:16:42
4
原创 控制資源每秒被訪問次數的實現
在平時做接口開發時，可能遇到需要控制接口訪問頻率的需求，比如某個接口每秒最多允許被訪問100次，我們可以藉助併發工具類中的Semaphore實現，以下爲示例代碼： public class TPSLimiter { privat
2018-08-26 21:16:36
1
原创 HBase單機模式與分佈式環境搭建
Hbase安裝模式介紹 單機模式 1> Hbase不使用HDFS,僅使用本地文件系統 2> ZooKeeper與Hbase運行在同一個JVM中 分佈式模式 – 僞分佈式模式 1> 所有進程運行在同一個節點上,不同進程運行在不同
2018-08-26 21:16:31