作者:柯根 更多內容詳見數據中臺官網 https://dp.alibaba.com
從整體上看,數據中臺體系架構可分爲:數據採集層、數據計算層、數據服務層三大層次。通過這三大層次對上層數據應用提供數據支撐。
數據採集層
對於企業來說,每時每刻都在產生海量的數據,數據採集作爲數據體系第一環尤爲重要。
因此在數據採集層需要建立了一套標準的數據採集體系方案,並致力全面、高性能、規範地完成海量數據的採集,將其傳輸到大數據平臺。
互聯網日誌採集體系包括兩大體系:Web端日誌採集技術方案;APP端日誌採集技術方案。
在採集技術之上,企業可以用面向各個場景的埋點規範,來滿足日誌數據打通等多種業務場景。同時,還可以建立了一套高性能、高可靠性的數據傳輸體系完成數據從生產業務端到大數據系統的傳輸;在傳輸方面,採集技術可既包括數據庫的增量數據傳輸,也包括日誌數據
數據中臺交付專家告訴你,數據架構的分層怎樣更加合理?
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
對接HiveMetaStore,擁抱開源大數據
原創
2024-04-24 22:33:08
如何從0到1設計診斷系統
原創
2024-04-26 22:43:26
華爲雲Stack8.3面向香港正式發佈,六大亮點激發雲上躍遷
原創
2024-04-26 10:33:21
重磅新品發佈!雲耀數據庫HRDS,享受輕量級的極致體驗
原創
2024-04-23 22:32:33
沙特2030年願景和對中國IT企業的市場機會分析
原創
2024-04-23 22:24:54
03-爲啥大模型LLM還沒能完全替代你?
原創
2024-04-23 01:07:00
入職3年-我如何做一名AI產品經理
原創
2024-04-22 11:16:31
01-大語言模型發展
原創
2024-04-22 01:12:50
WhaleScheduler爲銀行業全信創環境打造統一調度管理平臺解決方案
原創
2024-04-19 21:18:25
用戶行爲分析模型實踐(四)—— 留存分析模型
原創
2024-04-19 11:26:00
Golang爬蟲代理接入的技術與實踐
原創
2024-04-26 23:26:42
Apache RocketMQ ACL 2.0 全新升級
原創
2024-04-26 21:12:10
從零開始學架構V2-架構設計流程-2
原創
2024-04-25 23:56:26