原创 純java語言分析網站後臺日誌IP排序處理

用純java分析網站後臺日誌並按照IP排序 package byzx.fq.get; import java.io.BufferedReader; import java.io.File; import java.io.FileInpu

原创 用JAVA連接Hbase的DBHelp類

用JAVA語言連接Hbase數據庫的DBHelp 如下所示: 靜態方法: import java.io.IOException; import java.util.List; import org.apache.hadoop.co

原创 大數據與雲計算基礎知識總結(一)

1.雲計算來源: Google搜索引擎首先提出,並通過三篇論文爲世人所知。 2.雲計算定義: 動態擴展,通過網絡將虛擬化資源作爲服務提供。(Iaas,Paas,Saas) Iaas:提供硬件資源,AWS,網絡服務,基礎架構。 P

原创 Hadoop2.X64 分佈式安裝指南

Hadoop2.X64 分佈式安裝指南 1  前言 Hadoop 安裝有如下三種方式: 單機模式:安裝簡單,幾乎不用作任何配置,但僅限於調試用途; 僞分佈模式:在單節點上同時啓動 NameNode、DataNode、JobTracker

原创 用java針對網站日誌進行KPI處理

用java針對網站日誌進行KPI處理的代碼,分段進行。 package byzx.fq.get; /** *針對sogou表 KPI 數據表統計工程 */ public class KPI { //工程信息定義 pr

原创 java編寫針對Redis數據庫操作的DBHelper類

用java語言編寫針對Redis數據庫操作的DBHelper類。 其中主要針對數據庫的增刪該查方法,方法分爲單一和集合類兩種。 程序分爲兩部分,測試方法和封裝類方法。 import redis.clients.jedis.Jedis;

原创 大數據與雲計算基礎知識(二)

一、Scala語言 1.將Java腳本化的語言,基於JVM虛擬機,面向函數的對象語言。類似於Java的編譯直接執行過程,有Scala解釋器。 2.Scala也可被稱爲REPL。概念:讀取=>求職=>打印=>循環。 3.聲明中:val

原创 用java實現Hadoop中HDFS的函數調用

以下是使用JAVA實現的HDFS的指令調用。 主方法如下: import java.net.URI; import org.apache.hadoop.conf.Configuration; import org.apache.ha

原创 簡單應用ECharts繪製可視化圖表

1.在ECharts官網,網址是:http://echarts.baidu.com/index.html,下載Echarts3.5.4的源碼和示例文件。 2.解壓縮下載下來的Echars壓縮包,找到doc\example\www\js目錄