原创 使用MyEclipse開發HBase應用程序

當第三方訪問HBase的時候,首選需要訪問ZooKeeper,因爲HBase的重要信息保存在ZooKeeper當中。我們知道,ZooKeeper集羣的信息由$$HBASE_HOME/conf/hbase-site.xml文件指定。

原创 Java開源爬蟲框架WebCollector—爬取新浪微博

本教程給出了一個使用WebCollector模擬登陸並爬取新浪微博的示例.登錄過程中會出現驗證碼.如圖所示: 1.依賴jar包: 本教程需要兩套jar包,WebCollector核心jar包和selenium的jar包。

原创 streaming常見計算任務失敗原因

常見計算任務失敗原因 1) 子進程返回錯誤1 java.lang.RuntimeException: PipeMapRed?.waitOutputThreads(): subprocess failed with code 1 at

原创 Linux Bash Shell入門教程

BASH 的基本語法 最簡單的例子 —— Hello World! 關於輸入、輸出和錯誤輸出 BASH 中對變量的規定(與 C 語言的異同) BASH 中的基本流程控制語法 函數的使用 2.1     最簡單的例子 —

原创 Ubuntu 14.04 上安裝 CUDA 7.5/8.0 超詳細教程

2017/1/5 更新 本篇文章是基於之前安裝CUDA 7.5的經驗寫的,但因爲最近更新TensorFlow 到了r0.12版本,官方提示該版本TensorFlow 和CUDA 8.0 & cudnnv5.1 配合的最好,所以又卸了C

原创 如何實現FTP上傳

要想實現FTP上傳首先我們要了解什麼是FTP.下面是百度百科給出的定義: FTP 是File Transfer Protocol(文件傳輸協議)的英文簡稱,而中文簡稱爲“文傳協議”。用於Internet上的控制文件的雙向傳輸。同時,它也是

原创 [ubuntu入門手冊]-17-使用vnc與ssh遠程管理

引言 這篇文章給大家介紹ubuntu下三種遠程管理的方法,兩種vnc遠程圖形化接入管理方式,一種ssh終端遠程接入管理方式。 文章目錄 0×1.使用vino-preferences開啓遠程桌面共享0×2.使用vncserver開啓遠程桌面

原创 從域名到網站,只需四步,輕鬆訪問

第一步、註冊域名 首先您需要先擁有一個域名,點擊這裏查看 我還沒有域名,該如何購買? 第二步、準備服務器和網站 1、已經有域名,接下來該如何操作?接下來需要您開始準備網站和服務器 如果您已經做好了網站,還沒有購買服務器?您

原创 公網地址和私網地址問題

       服務器映射用於將內網服務器的私網地址映射爲公網地址,供Internet用戶訪問。選擇“靜態映射”類型可以將每一臺服務器映射成一個獨立的公網IP地址。“服務器負載均衡”類型可以將多臺服務器映射成同一個公網地址,Internet

原创 Hadoop Streaming 常見錯誤(不斷更新ing)

1、streaming默認的情況下,mapper和reducer的返回值不是0,被認爲異常任務,將被再次執行,默認嘗試4次都不是0,整個job都將失敗 java.lang.RuntimeException: PipeMapRed.

原创 Linux系統下如何查看及修改文件讀寫權限

查看文件權限的語句:   在終端輸入: ls -l xxx.xxx (xxx.xxx是文件名)   那麼就會出現相類似的信息,主要都是這些: -rw-rw-r--   一共有10位數   其中: 最前面那個 - 代表的是類型   中間那

原创 VMware12使用三臺虛擬機Ubuntu16.04系統搭建hadoop-2.7.1+hbase-1.2.4(完全分佈式)

初衷 首先說明一下既然網上有那麼多教程爲什麼要還要寫這樣一個安裝教程呢?網上教程雖然多,但是有些教程比較老,許多教程忽略許多安裝過程中的細節,比如添加用戶的權限,文件權限,小編在安裝過程遇到許多這樣的問題所以想寫一篇完整的教程,希

原创 NVIDIA CuDNN 安裝說明-用於機器學習的GPU庫

安裝cudnn-7.0-linux-x64-v4.0-rc.tgz 去百度網盤下載https://pan.baidu.com/s/1qYQvEHm源文件 NVIDIA cuDNN是用於深度神經網絡的GPU加

原创 C++ stringstream類

From: http://www.usidcbbs.com/read-htm-tid-1898.html C++引入了ostringstream、istringstream、stringstream這三個類,要使用他們創建對象就必

原创 IDEA中多行註釋及取消註釋快捷鍵

1、一次性添加多行註釋的快捷鍵 首先選中要註釋區域,然後 ctrl+/ 這個是多行代碼分行註釋,每行一個註釋符號 ctrl+shift+/ 這個是多行代碼註釋在一個塊裏,只在開頭和結尾有註釋符號 2、取消多行註釋快捷鍵 怎樣添