原创 spark 實戰 1: 基於gettyimages spark docker image 創建spark 集羣

1、首先下載該鏡像到本地。https://hub.docker.com/r/gettyimages/spark/~$ docker pull gettyimages/spark2、從https://github.com/gettyimage

原创 實戰:Streaming data into HBase using Flum

1. create Idea project for AsyncHbaseEventSerializer添加dependency 到pom.xml<dependency>    <groupId>org.apache.flume.flume

原创 實戰:Install greenplum cluster on ubuntu 16.04

規劃:1個msater, 2個segments環境:ubuntu 16.04Greenplum Version: 'postgres (Greenplum Database) 5.3.0 build 2155c5a-oss1、安裝sudo

原创 在 eclipse Neon中安裝Gitflow插件

打開“Help > Install new software” 對話框.Work with中填寫 “http://download.eclipse.org/egit/updates” 或者“http://download.eclipse.o

原创 實戰:區塊鏈hyperledger fabric 初體驗 - 1:安裝部署

環境ubuntu 16.04 4.4.0-104-genericDocker version 17.03.0-ce, build 60ccb22docker-compose version 1.14.0, build c7bdf9egit

原创 實戰:區塊鏈hyperledger fabric 初體驗 - 4:基於區塊鏈鑽石交易展示平臺的搭建

本文Step by Step 搭建一個由IBM提供的基於Fabric的鑽石交易展示平臺。本文環境是ubuntu 16.04 4.4.0-104-genericDocker version 17.03.0-ce, build 60ccb22d

原创 實戰:基於spring cloud + docker構建微服務

本系列記錄學習 spring-cloud-microservice-example的實戰過程,並對利用spring cloud + docker 構建端到端的微服務架構技術進行解析。0.安裝前的準備,下列軟件需要安裝。Maven 3Java

原创 實戰:利用KNIME建立Spark Machine learning 模型 1:開發環境搭建

1、Knime Analytics 安裝從官方網站下載合適的版本 https://www.knime.com/downloads 將下載的安裝包在安裝路徑解壓 https://www.knime.com/installation-0 下圖是

原创 實戰:區塊鏈hyperledger fabric 初體驗 - 3: 鏈碼實例安裝、實例化、調用及代碼

本文鏈碼實例爲Fabric 官方實例examples/chaincode/go/chaincode_example02,實現簡單的轉賬功能進入到cli容器裏面$ docker exec -it fabric-cli bash1. 鏈碼安裝以

原创 實戰:給KVM虛擬機上安裝的windows系統增加硬盤

宿主機是ubuntu16.04,安裝KVM,並安裝了Windows 7系統,最初分配硬盤空間太小,於是考慮添加硬盤,具體操作實錄如下。1、用QEMU硬盤鏡像工具qemu-img創建硬盤鏡像$cd /var/lib/libvirt/image

原创 Docker安裝停止在:Setting up docker-engine (1.11.2-0~xenial)的解決方法

安裝環境ubunt 16.04, 內核:4.4.15-040415-generic,安裝 docker-engine (1.11.2-0~xenial)問題:安裝docker-engine,在最後一步配置 docker-engine時長時間

原创 實戰:區塊鏈hyperledger fabric 初體驗 - 2: 測試網絡

1、make gen_configgenerate the crypto-config and channel-artifacts.$ hyperledger/docker-compose-files/hyperledger_fabric/

原创 實戰:利用KNIME建立Spark Machine learning模型 2:泰坦尼克倖存預測

本文利用KNIME基於Spark決策樹模型算法,通過對泰坦尼克的包含乘客及船員的特徵屬性的訓練數據集進行訓練,得出決策樹倖存模型,並利用測試數據集對模型進行測試。1、從Kaggle網站下載訓練數據集和測試數據集2、在KNIME創建新的Wor