原创 Impala內存優化實戰案例

Impala內存優化實戰案例 暢遊DT時代(李珂) · 2016-03-26 01:23 文章來源：中國聯通網研院網優網管部——IT技術研究團隊 作者：李珂 一. 引言     Hadoop生態中的NoSQL數

2018-09-05 01:10:37

原创 java jvm基礎知識

參考：http://www.cnblogs.com/redcreen/archive/2011/05/04/2037056.html         :http://lhc1986.iteye.com/blog/1421832   :

2018-09-05 01:10:37

原创 Java回調函數詳解

1、回調函數的簡單實例 回調函數的簡單說明： 對象A的方法funA把對象A的引用傳遞到對象B的方法funB裏(且對象B方法funB的接收參數一般是對象A的實現接口),在對象B的方法funB中調用對象A的方法funC。對象A的方法fun

2018-09-05 01:10:37

原创 HDFS節點內數據平衡：DiskBalancer

轉載地址：http://blog.csdn.net/androidlushangderen/article/details/51776103 目錄(?)[-] 前言磁盤間數據不均衡狀況的出現磁盤間數據不均衡帶來的問題磁盤間數據

2018-09-05 01:10:37

原创 elasticsearch bulk 批量加載索引的實例

import java.io.BufferedReader; import java.io.File; import java.io.FileNotFoundException; import java.io.FileReader;

2018-09-05 01:10:37

原创 向量

1、向量定義： 有方向有大小的量，也稱矢量。 a⃗  =(x,y) 可以理解爲從座標(0,0) 到座標(x,y) 有向線段即(x−0,y−0) 。 2、向量的大小，即模 計算公式： |a⃗ | =x2+y2−−−−−−√ 3、向量的內

2018-09-05 01:10:36

原创 Hbase讀寫優化

轉載地址：http://www.iteye.com/news/31920 CSDN知識庫：你是如何與計算機結緣，踏上軟件開發之路的，能否跟我們分享一下。 代立冬：我走上計算機這條路主要源於大學室友薰陶，我本身是學數學專業的，按常理畢業後

2018-09-05 01:10:36

原创 shell 數組

#1、shell中的數組定義 #arrayName=(element1 element2 element3) #數組用小括號括起來的元素集合，個元素用空格分隔 #2、數組的遍歷 #${arrayName[

2018-09-05 01:10:36

原创 Linux使用nc命令監控檢測服務器端口

前端用apache htttpd進行發佈（80端口），通過雙機負載均衡轉發到後端的兩個tomcat進行處理（8081和8082端口），現在需要隨時監控這三個端口的情況，一旦down掉需要能夠立即告警處理。批量的系統監控比較好的是用nagi

2018-09-05 01:10:35

原创 imapa 內存使用設置

Impala Guide Cloudera.comTrainingSupportDocumentationDev Center|Contact UsDownloads This is the documentation for Imp

2018-09-05 01:10:35

原创 hbase 運維

1.1監控Hbase運行狀況  1.1.1操作系統  1.1.1.1IO  a.羣集網絡IO，磁盤IO，HDFS IO  IO越大說明文件讀寫操作越多。當IO突然增加時，有可能：1.compact隊列較大，集羣正在進行大量壓縮操作。

2018-09-05 01:10:30

原创 已經在 stage 的文件再配置到 .gitignore 不生效

背景： 在管理一個版本庫時，有時候不想要管理某些文件，如自己的測試文件，或涉及到有密碼的配置文件。這時我們只需要把這些不想被管理的文件（文件夾）配置到 .gitignore 文件中即可。 但對於已經被 staged 文件，加入 .git

2018-09-05 01:10:30

原创 MapReduce之mapOutputBuffer解析

轉載地址：http://blog.csdn.net/wangqinghuan1993/article/details/53785403 MapOutPutBuffer就是map任務暫存記錄的內存緩衝區。不過這個緩衝區是有限的，當寫入的數據

2018-09-05 01:10:30

原创 shell map

#1、declare -A 變量名 A一定要是大寫的A declare -A map=(["sunjun"]="a" ["jason"]="b" ["lee"]="c") echo ${#map[*]}

2018-09-05 01:10:29

原创 hbase region 手動 split

綜合一下幾個方面考慮是否需要進行split 1、requests次數是否均勻，如出現了極不均勻的情況下： 2、各regions的storefile 大小：若storefile size出現比較大的情況時。 3、如何進行region spl

2018-09-05 01:10:29