原创 Hbase最好的入門文檔

轉自阿里集團數據平臺 一、簡介 history started by chad walters and jim 2006.11 G release paper on BigTable 2007.2 inital HBase protot

原创 Hbase學習總結一

數據模型: 1.用戶在表格裏存儲多行數據行; 2.每個數據行都包括一個可排序的關鍵字,和任意數目的列; 3.表格是稀疏的; 4.列名是"<族名>:<

原创 大數據處理相關的好博文

(1)大數據 Scribe是Facebook開源的日誌收集系統 ØMQ(ZeroMQ)簡介 storm簡介 使用Storm實現實時大數據分析 Yahoo! s4和Twitter storm的粗略比較 Yahoo!S4分佈式流處理引擎分析總

原创 基於QJM/Qurom Journal Manager/Paxos的HDFS HA原理及代碼分析

轉載 http://yanbohappy.sinaapp.com/?p=205 HDFS HA的解決方案可謂百花齊放,Linux HA, VMware FT, shared NAS+NFS, BookKeeper, QJM/Quo

原创 Putty的顏色設置

默認的Putty顏色非常難看,深藍色,綠色,深紅色...看着很不舒服,尤其是目錄默認爲深藍色,不仔細看很難看清楚。 這裏有一個可以讓putty展示更好看點的解決方案,先看效果圖 設置方法 1.下載配置文件:igvita

原创 hadoop namenode 高可用(HA)搭建指南 QJM方式

一、HDFS的高可用性 1.概述          本指南提供了一個HDFS的高可用性(HA)功能的概述,以及如何配置和管理HDFS高可用性(HA)集羣。本文檔假定讀者具有對HDFS集羣的組件和節點類型具有一定理解。有關詳情,請參閱Apa

原创 HBase性能優化方法總結(一):表的設計

轉自http://www.cnblogs.com/panfeng412/archive/2012/03/08/hbase-performance-tuning-section1.html 本文主要是從HBase應用程序設計與開發的角度

原创 Hbase Shell官方詳解

HBASE SHELL COMMANDS: alter Alter column family schema; pass table name and a dictionary specifying ne

原创 cdh4.2.0源碼搭建hadoop+hbase+zookeeper開發環境

1.   準備工作 (1)   首先在cloudera的官網上下載CDH4的hadoop-2.0.0-cdh4.2.0、hbase-0.94.2-cdh4.2.0、zookeeper-3.4.5-cdh4.2.0的tar包 (2)   在

原创 hadoop+hbase+zookeeper環境搭建過程總結

     安裝的環境要求:我用的是x86_64的CentOS6.3 linux操作系統,安裝過程很簡單,一路默認即可。      搭建開發環境是學習一門新技術的首先要面對的,當然技術的選型也是相當重要,剛開始搭建環境的時候公司讓用clou

原创 HBase如何合理設置客戶端Write Buffer

http://blog.linezing.com/2012/11/how-to-use-hbase-client-write-buffer HBase客戶端API提供了Write Buffer的方式,即批量提交一批Put對象到HBa

原创 HBase性能調優

原文鏈接:http://kenwublog.com/hbase-performance-tuning 配置優化 zookeeper.session.timeout默認值:3分鐘(180000ms)說明:RegionServer與

原创 無線網絡靜態IP設置批處理腳本

@echo 更改“無線網絡連接”IP地址 @echo IP:192.168.6.112 @echo 網關:192.168.1.1 @echo DNS:10.10.198.31 @pause @echo o

原创 HBase Coprocessor to Index Columns into ElasticSearch

http://www.open-open.com/doc/view/c2af706064f84e128d0f74826523a1ea

原创 HBase業務開發測試

業務開發測試HBase之旅一:HTable基本概念http://www.taobaotest.com/blogs/qa?bid=13850業務開發測試HBase之旅二:通過HBase Shell與HBase交互http://www.tao