原创 小米論壇爬蟲

xiaomi_forum_spider 小米論壇爬蟲 軟件前提 1. 需要安裝python環境 2. pip install scrapy(python版本爬蟲) 3. pip install MySQL-python(python版本

原创 rabbitmq環境搭建安裝及官方例子學習使用

rabbitmq軟件安裝與啓動 1.rabbitmq安裝 這裏使用docker的方式,方便 docker pull rabbitmq Using default tag: latest latest: Pulling from lib

原创 ubuntu安裝docker私有服務器

安裝registry 1.安裝之前請先安裝docker ubuntu下安裝docker 2.安裝並啓動registry docker run -d -p 5000:5000 --restart=always --name regist

原创 hadoop分佈式環境搭建二(集羣搭建)

安裝準備 1.在/opt目錄下創建software及modules文件夾,並修改到爲mac用戶下 sudo mkdir /opt/software [sudo] password for mac: [mac@centos1 ~]$

原创 docker快速發佈nodejs應用

安裝redis 1.docker安裝redis docker pull redis Using default tag: latest latest: Pulling from library/redis 75a822cd7888:

原创 webdriveragent調試及usb測試

操作步驟 1.首先啓動手機上的facebook的webdriveragent,這裏直接使用macaca改造後的webdriveragent測試 npm install app-inspector -g WEBDRIVERAGENT_

原创 docker搭建jenkins

1.安裝jenkins docker pull jenkins Using default tag: latest latest: Pulling from library/jenkins 75a822cd7888: Already

原创 ubuntu安裝docker

ubuntu安裝docker 1.更新系統源 sudo apt-get update sudo apt-get install apt-transport-https ca-certificates 2.添加GPG key su

原创 rocketmq環境搭建

rocketmq環境搭建 1.下載rocketmq git clone -b develop https://github.com/apache/rocketmq.git cd rocketmq mvn -Prelease-all -

原创 ofbiz16.11環境搭建

ofbiz下載安裝 1.下載 進入ofbiz官方頁面http://ofbiz.apache.org/download.html頁面下載最新版本16.11.01 2.下載gradle 進入https://gradle.org/instal

原创 hive客戶端

hive客戶端說明 1.運行Hive CLI,過時了(缺乏多用戶,安全及很多其他的特性),由hiveserver2的Beeline客戶端代替 $HIVE_HOME/bin/hive 2.hiveserver2的Beeline $HI

原创 hiveserver2服務端及客戶端使用

hiveserver2服務端 hiveserver2是一個服務端接口,能夠使遠程客戶端鏈接並執行查詢操作並返回結果,目前的實現版本是基於thrift rpc調用,hiveserver2是hiveserver的改良版本,更好的支持併發及安

原创 macaca相關api整理彙總

鏈接地址 https://macacajs.github.io/macaca-wd/ macaca相關api整理彙總 1.方法:acceptAlert() 支持平臺: Android iOS 功能:捕捉當前顯示的彈出框 2.方法:ale

原创 hadoop分佈式環境搭建一(集羣準備)

安裝準備 首先按照教程安裝vmware虛擬機 鏈接 分佈式環境搭建 1.複製安裝好的centos虛擬機兩份,並分別命名爲centos2,centos3,這裏搭建有三臺主機的集羣 安裝後啓動任意一臺虛擬機如下所以,這裏的用戶名爲mac

原创 kafka集羣搭建

kafka集羣搭建 1.下載kafka http://kafka.apache.org/downloads 2.下載slf4j軟件包 https://www.slf4j.org/download.html 3.將兩個壓縮包全部上傳到集羣