Hadoop的集羣環境部署說明

Hadoop集羣環境搭建是很多學習hadoop學習者或者是使用者都必然要面對的一個問題,網上關於hadoop集羣環境搭建的博文教程也蠻多的。對於玩hadoop的高手來說肯定沒有什麼問題,甚至可以說事“手到擒來”的事情,但對於hadoop的初學者來說,hadoop集羣環境的搭建着實壓力不小。

網上關於hadoop集羣環境搭建的文章有很多,可以說是“圖文並茂”,對於新手而言即使步驟再詳細,但看着這麼多步驟,那麼多的指令肯定是會覺得很繁瑣的。畢竟都是從菜鳥一步一步過來的,記得當初做hadoop集羣環境搭建真的是很煩瑣。

目前國內的hadoop商業發行版雖然比較多,但是在集羣環境的搭建方面基本都很類似或者是相同,指令多、步驟繁瑣。有的時候覺得不免覺得很奇怪,這些發行商爲什麼不對hadoop的集羣環境部署做一下優化呢?幸運的是總算是讓我找到了一個hadoop發行版集羣環境搭建簡單易用。

這裏使用的是一款國產的hadoop發行版,大快搜索推出的DKhadoop。集羣環境的部署總體給我的感覺是比較簡單易用,不像以前的一些發行版那麼繁瑣。下面就給大家以DKhadoop爲例介紹一下這種簡單易用的hadoop集羣環境搭建。

1、爲集羣自定義一個名稱:在安裝集羣組建之前安裝程序需要對主機進行一些環境檢查工作,DKhadoop需要root權限,並通過ssh鏈接到主機。

2、選擇安裝模式,安裝模式有三種可以選擇,分別是基礎安裝、完整安裝和自定義安裝。基本安裝中包含的服務內容有:hafs-2.6.0的安裝、JDK1.7.0_79安裝、Yarn-2.6.0安裝以及zooleeper-3.4.6安裝

3、如果選擇完整安裝模式,則需要安裝的服務內容會更多,詳細可以的參考下方圖示內容以及說明部分介紹。

4、自定義安裝模式則可以自主的進行角色配置,通過對主機性能的檢測DKhadoop會按照主機性能推薦相應的分配設置。

5、從上述3種安裝模式中選擇一個合適的模式後,點擊右下角的【繼續】將自動進行組建的安裝,所有組建安裝成功後也就完成了集羣環境的部署。

這套DKhadoop的集羣環境部署是已經被優化過的了,個人覺得簡單易用。感興趣的朋友可以自己去看一下!

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章