flink讀不到kafka數據問題

 

[1]搭建集羣

[2]測試kafka集羣沒問題後,

根據[3]中開始用flink消費kafka數據,發現啥也麼有

調試辦法如下:

①去$KAFKA/logs下面看了下,是有相關主題的文件夾生成的.

② /kafka-console-consumer.sh --bootstrap-server Desktop:9091,Laptop:9092,Laptop:9093 --topic test-0921

依然沒有數據

③./kafka-console-consumer.sh --bootstrap-server Desktop:9091,Laptop:9092,Laptop:9093 --topic test-0921 --from-beginning

出來一大堆數據,以此判定kafka集羣的數據生成是沒啥問題的.

④加入

props.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "earliest");

代碼結束處刪除

keyedStream.writeAsText("/home/appleyuchi/KafkaFlinkTest");

 

終於有數據輸出了．　

⑤今早起來發現又沒數據了，使用了