繼數據庫、流處理器之後，數據管理的下一步是什麼？

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","marks":[{"type":"strong"}],"text":"本文要點"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"bulletedlist","content":[{"type":"listitem","attrs":{"listStyle":null},"content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"隨着企業的自動化程度越來越高，它們的業務流程也越來越自動化，最終得到的是許多需要彼此通信的應用程序。這在系統設計方面會帶來巨大的轉變，因爲這關係到完全由機器自動完成相關工作。"}]}]},{"type":"listitem","attrs":{"listStyle":null},"content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在傳統的數據庫中，數據是被動的，查詢是主動的：數據被動地等待某個東西運行查詢。而在流處理器中，數據是主動的，查詢是被動的：觸發器就是數據本身。交互模型有根本的不同。"}]}]},{"type":"listitem","attrs":{"listStyle":null},"content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在現代應用程序中，我們需要能夠查詢被動數據集獲取用戶動作的響應，但我們也需要通過數據進行主動交互，將數據作爲事件流被推送到不同的訂閱服務。"}]}]},{"type":"listitem","attrs":{"listStyle":null},"content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"我們需要重新思考數據庫是什麼，它對我們而言意味着什麼，以及我們如何與它包含的數據以及將它們連接在一起的事件流交互。"}]}]}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在2020年3月舉行的倫敦QCon大會上，我發表了關於“爲什麼仍有必要從技術角度來看流處理器和數據庫”的演講，並探討了未來可能將它們進行整合的行業趨勢。這些趨勢可以映射到從主動數據庫（如MongoDB）到流處理解決方案（如Flink、Kafka Streams或ksqlDB）的常用方法上。"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"我就職於Confluent，這家公司是由Apache Kafka的創建者創建的。這幾天，我在CTO的辦公室裏辦公。我們去年做的一件事就是仔細研究流處理器和數據庫之間的差異。這就產生了一個名爲ksqlDB的新產品。隨着事件流系統的流行，以及它們與數據庫之間存在的顯而易見的關係，比較不同的模型如何處理移動數據和靜止數據是很有用的。也許更重要的是，這些領域之間存在着明顯的整合跡象。數據庫正變得越來越主動，在寫入數據時發出事件，流處理器越來越被動，在它們積累的數據集上提供歷史查詢。"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}}]}