原创 Hbase1.0 客戶端api

最近在試用Hbase1.0的客戶端API,發覺變化還是挺大(以前版本也不熟)。到處都是deprecated。 現在應該是這樣子: Configuration  conf = HBaseConfiguration.create(); con

原创 Elasticsearch 5.0 rollover api 學習

一不留神,Elasticsearch都5.0了,這個是爲了追Lucene還是solr? 想想hbase怎麼從0.98, 0.99掙扎到1.0,令人唏噓不已。 els5.0很誘人的,看看這個被招安的曾勇(Medcl)怎麼說:http:/

原创 flume+kafka+storm+redis+mongodb 配置

內存: Flume : jvm  Xmx 缺省配置1024M  bin/flume-ng 中有設置。 Kafka : jvm Xmx, Xms 缺省配置 1g  bin/kafka-server-start.sh 中有設置 Storm

原创 Global ordinals全局順序

Global ordinals is a data-structure on top of fielddata and doc values, that maintains an incremental numbering for eac

原创 程序在eclipse運行正常,但是打包上傳到服務器上卻報“java.lang.reflection.invocationTargetException”

開發機上安裝的是jdk1.8,服務器是1.7。 開發機的eclipse設置了java compiler爲1.7。 此程序修改之前是可以運行的。 後來因爲數據量的原因,把一個變量的類型由int,改成了long。 再打包上傳,運行就出問題了。

原创 Hbase 實戰 4.1 點滴

4.1.4 Targeted data access ...... Putting data into the cell value occupies the same amount of storage space as putting

原创 flume+kafka+storm+redis+mongodb日誌優化

1  flume 我們自己寫的flume啓動腳本flume.sh中,通過nohup啓動,nohup日誌輸出到nohup.out。 該日誌會一直增長。 修改: nohup日誌輸出到 /dev/null 2 kafka kafka的日誌原來

原创 ElasticSearch學習筆記

 1 Elasticsearch中的概念與關係型數據庫對比。 Relational DB  ⇒ Databases ⇒ Tables ⇒ Rows         ⇒ Columns 關係型數據庫       數據庫         

原创 HBase實戰 2.2.5 背景知識:HBase讀路徑

 2.2.5 Under the hood: the HBase read path As a general rule, if you want fast access to data, keep it ordered and ke