原创 MapReduce程序打jar要注意的事項

package cmd; import java.io.IOException; import java.net.URI; import org.apache.hadoop.conf.Configuration; import org

原创 JMeter對Vertica數據庫的測試

前期準備工作: 1,下載jmeter的安裝包,可以去apache.jmeter.com官網下載,版本號如下圖: 2,得配置Java的環境變量,這裏估計大家都知道怎麼配,這裏就不多說了。 一,打開Jmeter的控制頁面。如下圖 2,打

原创 vi編輯器的各種命令總結

 光標控制命令 命令   光標移動 h或^h   向左移一個字符 j或^j或^n  向下移一行 k或^p   向上移一行 l或空格   向右移一個字符 G   移到文件的最後一行 nG   移到文件的第n行 w   移到下一個字的開頭

原创 搭建hbase HA集羣

前言: 下載hbase的版本爲1.0.0-cdh5.5.1,安裝好hadoop和zookeeper hbase集羣架構 主節點:172.16.12.85 從節點:172.16.12.88 數據節點:172.16.12.91,172.16.

原创 Linux命令的一些總結

1,linux有個根目錄就是以“/”爲代表的目錄,如果你以root賬戶登錄的話,你的家就/root,如果以其他用戶登錄的話則是/home。 2,在linux中,”~“代表家目錄。 3,hadoop fs -put <linux目錄下的文件

原创 Zookeeper簡介

Zookeeper 作爲一個分佈式的服務框架,主要用來解決分佈式集羣中應用系統的一致性問題,它能提供基於類似於文件系統的目錄節點樹方式的數據存儲,但是 Zookeeper 並不是用來專門存儲數據的,它的作用主要是用來維護和監控你存儲的數據

原创 Zookeeper,Hbase,hadoop之間的聯繫

這裏有幾個主要關係: 1.經過Map、Reduce運算後產生的結果看上去是被寫入到HBase了,但是其實HBase中HLog和StoreFile中的文件在進行flushto disk操作時,這兩個文件存儲到了HDFS的DataNode

原创 linux系統掛載分區

  Linux的雲服務器數據盤未做分區和格式化,可以根據以下步驟進行分區以及格式化操作。 一:登陸 用Linux 的SSH 登陸軟件(xshell 或者putty) 登陸阿里雲主機服務器。   二:查看主機數據盤 在沒有分區

原创 Zookeeper的常用方法舉例

表 1 org.apache.zookeeper. ZooKeeper 方法列表 方法名 方法功能描述 Stringcreate(String path, byte[] data, List<ACL> acl,CreateMode c

原创 Hbase理論知識詳解

表在行方向上,按照行key範圍劃分成若干的Region 每個表最初只有一個region,當記錄數增加到超過某個閥值時,開始分裂成兩個region 物理上所有數據存放在HDFS,由Region服務器提供region的管理 一臺物理節點只能

原创 mysql免安裝文件怎麼使用

 1.準備工作 下載mysql的最新免安裝版本mysql-noinstall-5.1.53-win32.zip,解壓縮到相關目錄,如:d:\ mysql-noinstall-5.1.53-win32。這個就是mysql的根目錄了。 2

原创 Hbase的簡介

一、簡介 history started by chad walters and jim 2006.11 G release paper on BigTable 2007.2 inital HBase prototype created