原创 第五章 Hadoop的I/O操作
Hadoop自帶一套原子操作用於數據I/O操作。主要考慮的問題是數據完整性、數據壓縮、序列號、on-disk數據結構。 5.1 數據完整性 如果需要處理的數據大到Hadoop的處理極限，數據損壞的機率還是很高的。 檢測數據是否損
2019-09-08 09:09:15
1
原创 信鴿1.2.0 Intent 無法跳轉頁面
使用信鴿java服務端1.2.0 的demo，信鴿java服務端最新版，經過測試，客戶端收到消息後無法跳轉指定頁面。 代碼 `ClickAction action = new ClickAction();’ 'action.s
2019-06-18 11:02:41
原创 第四章 關於YARN
Apache YARN（Yet Another Resource Negotiator） ，是Hadoop的集羣資源管理系統。提供請求和使用集羣資源的API,但這些API一般不是用於用戶的代碼，而是爲分佈式計算框架如MapRedu
2019-06-11 23:32:40
原创 RFM
RFM模型是衡量客戶價值和客戶創利能力的重要工具和手段。在衆多的客戶關係管理(CRM)的分析模式中，RFM模型是被廣泛提到的。該機械模型通過一個客戶的近期購買行爲、購買的總體頻率以及花了多少錢3項指標來描述該客戶的價值狀況。 參考
2019-05-01 00:49:15
原创 計算機的指令信息
指令 是指示計算機硬件進行某種操作的命令。CPU就是根據指令指揮和控制計算機各部件協調動作，實現對信息的加工和處理。 指令系統 一臺計算機所有指令的集合構成該機的指令集（Instruction set），稱爲指令系統，指令系統是軟件與
2019-03-25 09:45:34
原创 第三章 Hadoop 分佈式文件系統
聲明，此連續文章爲閱讀《Hadoop權威指南第4版》的讀書筆記，旨在記錄重點內容和閱讀心得，有共讀的朋友可以交流書中疑惑。 3.1 HDFS的設計 HDFS以流式數據訪問模式來存儲超大文件，運行於商用硬件集羣上。 超大文件 流式數
2019-02-27 15:42:33
原创 第二章 關於MapReduce
MapReduce的優勢在於處理大規模數據集 # 2.1 氣象數據集 本章給了一個從氣象數據中計算每年最高氣溫的例子。原始數據來自ncdc，見下方ftp。數據的格式是每年一個文件，每個文件中有多條氣象數據的記錄。 ftp://ftp.
2019-02-19 15:36:26
原创 第4章 集成
聲明，此連續文章爲閱讀《微服務設計》[英]紐曼（Sam Newman）的讀書筆記，旨在記錄重點內容和閱讀心得，有共讀的朋友可以交流書中疑惑。 4.1 尋找理想的集成技術的指導原則 避免服務方修改一個字段就引起消費方的修改 保證API的
2019-02-19 15:36:26
原创 第一章 初識Hadoop
聲明，此連續文章爲閱讀Hadoop權威指南第4版的讀書筆記，旨在記錄重點內容。 1.1 數據 數據會越來越大，我們需要有對應的技術來存儲和分析它們。 1.2 數據的存儲和分析 硬盤容量的發展與讀寫速度已經不匹配，硬盤越來越大
2019-01-25 15:46:12
原创 查看zookeeper日誌
zoo.cfg中可以通過dataLogDir來配置zookeeper的事務日誌的輸出目錄。 但是這些日誌文件是二進制的，無法通過普通的查看名單看。需要通過org.apache.zookeeper.server.LogFormatter，這
2018-08-24 11:22:45
1
原创 第一章 spring cloud 資料彙總
spring cloud官方文檔 http://cloud.spring.io/spring-cloud-static/Dalston.SR3/ https://springcloud.cc/spring-cloud-dalston
2018-08-24 11:22:45
2
原创 tomcat7下正常的工程在tomcat8下啓動報錯
問題報錯： java.lang.NoSuchMethodError: org.springframework.web.context.ConfigurableWebApplicationContext.setId(Ljava/lang/S
2018-08-24 11:22:43
原创 axis2在tomcat的temp中產生大量的臨時文件，壓力測試性能存在問題
問題解決：升級axis2jar至1.7.0，臨時文件不再產生，性能問題解決 參考：http://blog.csdn.net/mjjmjc/article/details/42076077 參考：https://stackoverflow.
2018-08-24 11:22:43
7
原创 mvn -deploy 報錯Failed to deploy artifacts: Could not find artifact
問題報錯： [ERROR] Failed to execute goal org.apache.maven.plugins:maven-deploy-plugin:2.8.2:deploy (default-deploy) on proj
2018-08-24 11:22:43
61