原创 Hbase 提高寫入效率之 預分區
背景：HBase默認建表時有一個region，這個region的rowkey是沒有邊界的，即沒有startkey和endkey，在數據寫入時，所有數據都會寫入這個默認的region，隨着數據量的不斷 增加，此region已經不能承受不斷
2020-06-29 01:48:18
原创 linux掛載硬盤重啓後出現an error occurred during the file system check錯誤最有效的解決辦法
本來是磁盤不夠用，新增磁盤的，結果出現問題，找了許久解決了， 利用『 mount -n -o remount,rw / 』重新掛載根目錄， 這之後就把剛纔錯誤的地方修改一下，注意，這個時候fstab就可以讀寫了。那麼，所有的問題也就可以
2020-06-29 01:48:18
原创 spark安裝教程
1、準備工作 scala-2.9.3：一種編程語言，下載地址：http://www.scala-lang.org/download/ spark-1.4.0：必須是編譯好的Spark，如果下載的是Source，則需要自己
2020-06-29 01:48:18
原创 Spark Streaming 入門教程
工具 intelliJ IDE工具，和 spark 包，還有 linun服務器 首先 intelliJ IDE 新建一個項目導入 spark的jar包 使用的是 spark-1.4.0-bin-hadoop2.4.tgz 解壓後得
2020-02-22 14:04:44
原创 Hbase 的 htablepool的小記錄
都說使用 池可以 提高效率， 提前new好的 private static HTablePool hTablePool; 早起代碼是這樣的 HTableInterface[] tables = new HTableInterface[
2020-02-22 14:04:44
原创 linux安裝mysql yum版本
二、卸載掉原有mysql 因爲mysql數據庫在Linux上實在是太流行了，所以目前下載的主流Linux系統版本基本上都集成了mysql數據庫在裏面，我們可以通過如下命令來查看我們的操作系統上是否已經安裝了mysql數據庫 [roo
2020-02-22 14:04:44
原创 flume入門配置
一、什麼是Flume? flume 作爲 cloudera 開發的實時日誌收集系統，受到了業界的認可與廣泛應用。Flume 初始的發行版本目前被統稱爲 Flume OG（original generation），屬於 clouder
2020-02-22 14:04:44
原创 hbase協處理器coprocessor 統計行數量 案例
其實可以通過 hbase shell 在配置文件裏面增加 coprocessor 的選項，但是我個人覺得不太方便 代碼方面可以對 單獨的表進行控制，覺得更爲實用和方便一些， 下面貼上了本人的代碼，增加了是否註冊協處理器的判斷，以前的代碼
2020-02-22 14:04:44
原创 HBUILDER入門
網上完成的代碼例子太少。自己記錄一下 mui.init()mui.plusReady(function() {document.getElementById("login").addEventListener('tap', functio
2020-02-22 14:04:44
原创 Hbase 過濾器以及比較器案例
hbase過濾查詢， 感覺還是很有用的。 機率一下案例， 備用 比較器運算符 左邊是代碼名稱，右邊是 含義 CompareOp.EQUAL; = CompareOp.LESS ;
2020-02-22 14:04:44
原创 vm linux克隆IP配置問題
http://www.th7.cn/system/lin/201407/64402.shtml 1、用vmware克隆一個centos 2、進入centos，打開命令行輸入ifconfig，執行後發現沒有eth0 3、
2020-02-22 14:04:44
原创 HADOOP單機模式安裝
1.1修改主機名vim /etc/sysconfig/networkNETWORKING=yesHOSTNAME=itcast ### 1.2修改IP兩種方式：第一種：通過Linux圖形界面進行修改（強烈推薦）進入Linux圖形界面
2020-02-22 14:04:44
原创 mapreducer數據結果輸出到mysql
package com.xxxx.wujiang.mysql; import java.io.DataInput; import java.io.DataOutput; import java.io.IOException; impor
2020-02-22 14:04:34
原创 安裝 HA-hadoop教程,關鍵流程
1 安裝虛擬機 1 修改主機名以及hosts vi /etc/sysconfig/network vi /etc/hosts 2 修改IP 圖形化修改。 保證可以ping通主機，外網 3 關閉防火牆 重啓後生
2020-02-22 14:04:34