原创 [湖倉架構] Apache Paimon核心原理

這是一篇較爲完整的介紹Apache Paimon和Flink進階應用的文章。 0 序 Apache Paimon 畢業(2024.04.16) 北京時間 2024 年 4 月 16日,開源軟件基金會 Apache Software Fo

原创 公開壓縮算法概述

0 序 文由 下載開源軟件時,源站經常會提供多種格式的下載文件如zip、tar.gz等。如果是Linux操作系統,我們一般會下意識地選擇tar.gz格式的壓縮文件;而對於Windows操作系統,我們常選擇zip格式。我一直以來就是這麼用

原创 [Flink] Flink 基礎概念篇

0 序 1 Flink 基礎概念 基礎概念類 作業(Job) 類似於MaxCompute或Hadoop Job,一個實時計算的作業描述了一個完整的流式數據處理業務邏輯,是流式計算的基礎業務單元。 JobManager TaskMan

原创 [智能網聯汽車] 解讀理想汽車的整車EEA電子電氣架構 | 2020 [轉]

0 序 本文首發於華夏EV網、2020年。時至今日,這篇文章雖已過去了2年,今天的我們,對了解當前整車電子電氣架構(EEA)的技術演進仍有一定的參考意義。 關鍵詞: 整車電子電氣架構(EEA) 分佈式架構 域集中式架構 中央集中式架

原创 [數據安全] 荷蘭數據保護局《個人和私人組織數據抓取指南》:“數據抓取幾乎總是非法”

0 序 2024年5月1日,荷蘭數據保護局(Autoriteit Persoonsgegevens,AP)發佈了《個人和私人組織數據抓取指南》。 指南中爲數據抓取設定了嚴格的框架,與《通用數據保護條例》(GDPR)保持一致,並明確了允許數

原创 [智能網聯汽車] 2024華爲智能汽車解決方案發佈會:乾崑車雲服務3.0:智能、便捷、安全的全新升級 [轉]

在當今數字化時代,智能汽車已經成爲了人們生活中的重要組成部分。華爲於2024年4月24日在2024華爲智能汽車解決方案發佈會上,華爲智能汽車解決方案BU CEO靳玉志發表演講:發佈了最新的車雲服務——乾崑(kun)車雲服務3.0,爲用戶提供

原创 [網絡爬蟲] 網絡爬蟲實踐:大麥網演唱會預約搶票 【待續】

1 正常的最優搶票流程 1. 提前準備事項: 設置登錄密碼、郵箱、解綁淘寶,賬號綁定中只綁定【支付寶】 操作路徑:我的-賬號安全-登錄密碼、郵箱設置 提前設置好觀演人、收貨地址 操作路徑:我的

原创 [任務/調度/Docker] 基於Docker安裝XXL-Job-Admin

0 序 安裝信息 mysql : 5.7.x xxl-job-admin : 2.4.1 linux : centos 7.9 1 安裝步驟 Step1 安裝 docker 環境 yum -y update yum remov

原创 [數據庫] 淺談mysql的serverId/serverUuid

0 序 版本 本文圍繞 mysql 5.7.38 版本開展討論 情景1: MYSQL數據庫的主從複製架構:1主1從 MYSQL數據庫的binlog應用情況:存在多個基於binlog同步機制的FlinkCdcJob,從MYSQ

原创 [數據庫] 排查MySQL鎖表情況及解決思路

0 序 1 排查方法:查看當前鎖表事務 由於出現的是鎖表的問題,所以第一步從數據庫入手,查看導致鎖表的SQL語句是什麼;查看是否鎖表SQL語句; SELECT * FROM INFORMATION_SCHEMA.INNODB_LOCKS;

原创 [JWT] HTTP請求中Authorization: Bearer Header的用途 [轉]

"Authorization: Bearer" 是一種在 HTTP 請求頭部中用於傳遞訪問令牌(Access Token)的常見格式。它用於在客戶端和服務器之間進行身份驗證和授權操作。 底層原理是這樣的:當客戶端發送 HTTP 請求時

原创 [Java SE] 經典問題:超出Java Long型(8字節/64位)的二進制比特流數據如何進行大數的數值計算?

0 問題描述 經典問題:超出Java Long型(8字節/64位)的二進制比特流數據如何進行大數的數值計算? 近期工作上遇到了這個問題:需要將一個無符號數、且位長>=8字節(等於8字節時,首位bit爲1,其他bit不全爲0)的二進制字

原创 [計組] 計算機編碼方式:原碼、反碼、補碼

原碼、反碼和補碼是計算機中用來表示帶符號整數的三種編碼方式,它們在計算機內部的運算和表示過程中發揮重要作用。 在計算機系統中,數值一律用補碼來表示和存儲。 原因在於,使用補碼,可以將符號位和數值域統一處理;同時,加法和減法也可

原创 [數據管理] DAMA數據管理知識體系指南2(DMBOK2) # 知識框架

0 序言 0.1 序 作爲一名資深的數據工程師,作爲致力於深耕數據行業、產業互聯網、堅信數據管理與數據治理的數據人,自從業以來,我愈發深知數據在社會經濟生活中的越來越突出的重要性。 這些年來,見證了————這種重要性引來了政府、數據行

原创 [網絡/HTTPS/Java] PKI公鑰基礎設施體系:基礎概念篇

0 序 看過上一篇文章、且有點懵的朋友,可以參看本篇————針對PKI體系的核心概念進行解釋。 1 PKI體系(公開密鑰基礎設施體系) 1.1 PKI體系是什麼? PKI 是 Public Key Infrastructure 的縮