原创 win7下Ant編譯Zookeeper源碼爲Eclipse工程

1、安裝ant (1)下載ant,我下載的是apache-ant-1.9.4-bin.zip(地址:http://ant.apache.org/bindownload.cgi) (2)解壓到特定目錄,設置ANT_HOME(ant的解

原创 Zookeeper之監聽事件總結

zookeeper之監聽事件總結 http://blog.csdn.net/liu857279611/article/details/70495413 1.  zookeeper的Watch機制       一個zk的節點可以被監控,包

原创 分佈式系列文章——從ACID到CAP/BASE

分佈式系列文章——從ACID到CAP/BASE http://www.cnblogs.com/linbingdong/p/6178488.html 事務 事務的定義: 事務(Transaction)是由一系列對系統中數據進

原创 Zookeeper使用Ant 編譯源代碼報錯

錯誤問題: E:\1_Zookeeper\WS_Zookeeper\zookeeper-master>ant.bat eclipse Buildfile: E:\1_Zookeeper\WS_Zookeeper\zookeeper-mas

原创 Hadoop,Spark :文件輸出壓縮

Spark最終結果壓縮 sparkContext.textFile(inputPath).flatMap(x => { TestLog.readFromString(x) }).saveAsTextFile(outputPath

原创 使用ZooKeeper實現隊列

使用ZooKeeper實現隊列 http://blog.csdn.net/massivestars/article/details/53870399 實現原理 先進先出隊列是最常用的隊列,使用Zookeeper實現先進先出隊列就是在特定的

原创 Kafka研究

Kafka研究 架構   kafka是顯式分佈式架構,producer、broker(Kafka)和consumer都可以有多個。Kafka的運行依賴於ZooKeeper,Producer推送消息給kafka,Consumer從kaf

原创 Kafka消費組(consumer group)

  一直以來都想寫一點關於kafka consumer的東西,特別是關於新版consumer的中文資料很少。最近Kafka社區郵件組已經在討論是否應該正式使用新版本consumer替換老版本,筆者也覺得時機成熟了,於是寫下這篇文章討論並總

原创 Paxos算法與Zookeeper分析

Paxos算法與Zookeeper分析 http://blog.csdn.net/xhh198781/article/details/10949697 1 Paxos算法 1.1 基本定義 算法中的參與者主要分爲三個角色

原创 使用Zookeeper實現Leader(Master)選舉

使用Zookeeper實現Leader(Master)選舉 http://blog.csdn.net/MassiveStars/article/details/53894551 應用場景 分佈式系統最典型的架構就是一主多從。在很多時候,

原创 使用第三方ZKClient 讀取Zk數據報錯

使用第三方ZKClient 讀取Zk數據報錯: Exception in thread "main" org.I0Itec.zkclient.exception.ZkMarshallingError: java.io.EOFExcept

原创 CentOS7 使用無線WiFi連接並設置爲開機啓動

CentOS7 使用無線WiFi連接並設置爲開機啓動 轉載:https://blog.mrabit.com/details/25   廢舊筆記本裝上了CentOS7準備拿來練手,由於筆記本有線網孔壞了需要配合WiFi聯網使用 第一步,查看

原创 Centos 7 配置 WPA-PSK無線上網

本文內容修改自  http://www.itnose.net/detail/6249611.html centos7無線wifi連接 2015-04-18 15:14 一:所用命令 dmesg | grep firmware(看看有沒有來

原创 Phoenix(SQL On HBase)安裝和使用報告

Phoenix(SQL On HBase)安裝和使用報告http://www.cnblogs.com/kekukekro/p/6339587.html#wiz_toc_29一、爲什麼使用Phoenix二、安裝Phoenix2.1 兼容問題

原创 HDFS原理解析(整體架構,讀寫操作流程及源代碼查看等)

HDFS原理解析(整體架構,讀寫操作流程及源代碼查看等) 前言 HDFS 是一個能夠面向大規模數據使用的。可進行擴展的文件存儲與傳遞系統。是一種同意文件通過網絡在多臺主機上分享的文件系統,可讓多機器上的多用戶分享文件和存儲空間。讓實際上