原创 數據分析方法論-不同的分析階段
根據實際業務發展，針對產品的不同生命週期，數據分析的角度和策略是不同的。 按階段可有如下分析角度：描述型分析、診斷型分析、預測型分析和策略型分析。 描述型分析 發生了什麼？ 表面有什麼症狀 廣泛的離線、實時數據、數據集市、有效的數
2020-06-21 08:05:08
原创 一個排序問題
優先級如下： 年齡小於等於18歲的排在前面 -> 女士排在男士前邊 -> 體重沉的排在體重輕的前邊 測試集 Person p1 = new Person(16,"男",90); Person p2 = new Person(18,"
2020-06-21 07:25:24
原创 GCViewer:GC日誌可視化工具GCViewer
GCViewer 簡介：GCViewer是一個小工具，可以可視化展示 生成的詳細GC輸出。支持Sun / Oracle，IBM，HP和BEA的Java虛擬機。它是GNU LGPL下發布的免費軟件。 下載：https://sourcefor
2020-06-21 07:25:24
2
原创 內存調優實例：JVM堆大小
1、創建一個Spring Boot實例 @RestController public class GcTestController { private Queue<Greeting> queue = new Concurrent
2020-06-21 07:25:24
1
原创 聚類分析上證50成分股
2020年3月10日是個劃時代的日子，在全球主要市場一片慘淡的時刻，我們的大A終於走出了獨立行情。 爲了紀念這一天，我決定用EM聚類算法對上證50的成分股做一次聚類，將其劃分爲十類。 然後，我將從每類中隨機選一隻，打包一個投資組合，以上
2020-06-21 07:25:24
原创 主數據和元數據的概述
企業數據管理的內容和範疇通常包含交易數據、主數據以及元數據。以下主要討論主數據、元數據的概念及應用。 主數據和主數據管理的概念 企業主數據是用來描述企業核心業務實體的數據，比如客戶、合作伙伴、員工、產品、物料單、賬戶等；它是具有高業務價值
2020-06-21 07:25:24
1
原创 監控tomcat性能實例
目錄 1、創建一個Spring Boot程序 2、加大tomcat的最大線程數 3、使用JMeter加壓 4、監控工具顯示 現象： 分析： 定位問題： 概念再理解： 系統吞吐量幾個重要參數：QPS（TPS）、併發數、響應時間 jcon
2020-06-21 07:25:24
原创 java性能監測工具 VisualVM
VisualVM可以安裝一個插件Visual GC，可視化展示VM各代的使用和GC情況，直觀！ VisualVM的功能： 1顯示虛擬機進程以及進程的配置、環境信息（jps、jinfo）。 2監視應用程序的CPU、GC、堆、方法區(1.7
2020-06-21 07:25:24
原创 解剖Java對象
一個Java對象內部結構是什麼樣子的呢？ Java對象內部結構和對象頭的內部結構 一個對象在內存中分爲三塊存儲區域：1對象頭、2實例數據、3對齊填充 對象頭（Object Head）：對象頭佔
2020-06-21 07:25:24
原创 JMeter壓測工具介紹
簡介：Apache JMeter™應用程序是開源軟件，這是一個100％純Java應用程序，旨在加載測試功能行爲和衡量性能。 它最初是爲測試Web應用程序而設計的，但此後已擴展到其他測試功能。 下載：https://jmeter.apach
2020-06-21 07:25:24
原创 all distinct aggregate functions need to have the same set of parameters
I got the following error in my Impala query: select upload_key, max(my_timestamp) as upload_time, max(col
2020-06-21 07:25:24
原创 內存泄露探查 Memory Analyzer
1.模擬程序 新建一個Spring Boot程序，啓動類添加註解@EnableScheduling，創建定時組件。 @Component public class MemoryLeaker { private static fi
2020-06-21 07:25:24
原创 java性能監測工具 jconsole
jdk的bin目錄提供了兩個用於監測java程序性能的工具：jconsole和jvisualvm。 今天介紹jconsole，這個工具通過兩種方式觸達java程序，本地程序可直接連接到，也可通過JMX技術連接並監控遠程java進程。當需要
2020-06-21 07:25:24
原创 大數據平臺層級架構圖
數據平臺層級架構圖 主流數據平臺架構 一般包含三個層級，ODS層、數據倉庫層、數據應用層。 業務系統的操作和日誌數據抽取到ODS層，ODS的數據經過ETL過程（抽取Extraction，轉化Transformation，加載Load
2020-05-30 14:40:31