原创 SparkStreaming常用算子
常用的幾個算子 1.updateStateByKey 帶狀態的算子 必須設置checkpoint 實現：WordCount計數 def main(args: Array[String]): Unit = { v
2020-06-29 22:55:46
原创 leader的均衡機制
第一步 如何查看 topic的信息 1.如何查看 topic的信息 ，/kafka-topics .sh -- zookeeper node3:2181,node4:2181,node5:2181 --describe --t
2020-06-29 22:55:44
原创 flume參數詳解
Source、Channel、Sink有哪些類型 1.Flume Source Source類型 | 說明 Avro Source | 支持Avro協議（實際上是Avro R
2020-06-29 22:55:44
5
原创 SparkStreaming知識點總結
1、SparkStreaming簡介 1、 SparkStreaming是流式處理框架,是SparkAPI的擴展,支持可擴展、高 吞吐量、容錯的實時數據流處理,實時數據的來源可以是: Kafka, Flume, Twitter
2020-06-29 22:55:44
原创 併發編程基礎篇
一、併發編程基礎篇 分爲兩塊 1.x線程安全基礎知識、synchronized、volatile關鍵字的實際場景使用 1、併發編程線程安全問題。 理解線程安全👇 線程安全概念:當多個線程訪問某-一個類 (對象或方法)時
2020-03-19 08:47:50
原创 The import javax.servlet cannot be resolved解決方案
網上提供的方法是，在Eclipse中，右擊項目，選擇Build Path->configure build path->Libraries->Add External JARs，找到你計算機中tomcat的解壓路徑，在lib文件夾
2020-03-12 04:57:13
原创 redis集羣連接java
主從模式連接java 直接上乾貨 cao //指定業務查詢業務: SYS USER SEL AGE 25 //指定業務查詢業務: SYS USER SEL SEX m //指定業務查詢業務: SYS_ USER SE
2020-03-05 15:04:57
原创 gem install rubygems時報錯
因爲 ruby版本低 每次使用gem命令的時候都會報這種錯誤就是因爲 ruby太低。 還有這種錯誤 如何解決、 更換 yum源 原因，ruby版本小於了2.3.0 換yum源安裝 第一步 yum install cento
2020-03-05 15:04:57
原创 redis安裝
按照步驟一步一步來即可。。 2、Redis主從複製 2.0之前就有的一個特性，很簡單的一個特性 如果redis沒有設置 密碼第二步就忽略。 其目的就是，一個讀寫分離的機制，一主多服務，主用來寫，從用來讀取。 他
2020-03-02 13:09:14
原创 redis的常用命令
Redis的常用命令 redis的數據類型 redis-共分 爲五種基本數據類型: String、 Hash、 List、Set、 ZSet 1.String類型簡單就是一個key對應一個value 啓動Redis的命令
2020-02-28 22:40:37
原创 hadoop之Hdfs筆記大全
1： hadoop 1.x 由 hdfs 和 MapReduce 組成。 2： hadoop 2.x 由 hdfs 和 MapReduce 和 YARN三個分支組成。 hdfs：NN Federation (聯邦)
2020-02-28 22:40:37