原创 親測LNMP 的總體基本框架服務器的安裝搭建

Apache自1990年發佈以來,一直是web服務器市場的王者。Nginx出現較晚,因其在高併發下卓越的表現,最初是作爲Apache在高併發情況下的補充,當時Nginx+Apache是流行的架構.現在Nginx的功能已經十分完善,多數場合下

原创 大數據經典學習路線(及供參考)

1.Linux基礎和分佈式集羣技術 學完此階段可掌握的核心能力: 熟練使用Linux,熟練安裝Linux上的軟件,瞭解熟悉負載均衡、高可靠等集羣相關概念,搭建互聯網高併發、高可靠的服務架構; 學完此階段可解決的現實問題: 搭建負載均衡、高可

原创 學編程,學java還是大數據、android?平均月薪23k以上告訴你方向

學編程,學java還是大數據、android?有不少同學在糾結中,最近有不少初學者來問到,學習大數據,學習spark,公司主要使用那些語言編寫,每聽到這一個問題,起碼還是很不錯的,證明你已經開始學習大數據了,並瞭解大數據Spark是可以使用

原创 Python核心框架tornado的異步協程的2種方式

什麼是異步? 含義 :雙方不需要共同的時鐘,也就是接收方不知道發送方什麼時候發送,所以在發送的信息中就要有提示接收方開始接收的信息,如開始位,同時在結束時有停止位 現象:沒有共同的時鐘,不考慮順序來了就處理 直觀感受:就是不用等了,效率高

原创 大數據經典學習路線(及供參考)

1.Linux基礎和分佈式集羣技術 學完此階段可掌握的核心能力: 熟練使用Linux,熟練安裝Linux上的軟件,瞭解熟悉負載均衡、高可靠等集羣相關概念,搭建互聯網高併發、高可靠的服務架構; 學完此階段可解決的現實問題: 搭建負載均衡、高可

原创 3分鐘讓你讀懂Hadoop都做了什麼

寫這篇文章的原因是給那些看了很多幹貨,但是覺得說的太多,對於剛入門的同學看起來是比較枯燥的事情,那麼筆者就對此總結了hadoop簡潔版。希望能夠幫助初學的小夥伴。分享之前我還是要推薦下我自己創建的大數據學習交流Qun: 710219868

原创 大數據技術學習路線,該怎麼學?

如果你看完有信心能堅持學習的話,那就當下開始行動吧! 一、大數據技術基礎 1、linux操作基礎 linux系統簡介與安裝linux常用命令–文件操作linux常用命令–用戶管理與權限linux常用命令–系統管理linux常用命令–免密登

原创 spark入門介紹(菜鳥必看)經驗技術分享

什麼是SparkApache Spark是一個圍繞速度、易用性和複雜分析構建的大數據處理框架。最初在2009年由加州大學伯克利分校的AMPLab開發,並於2010年成爲Apache的開源項目之一。 與Hadoop和Storm等其他大數據和M

原创 零基礎Hadoop入門,哪裏學起?

1 Hadoop入門教程Hadoop是Apache開源組織的一個分佈式計算開源框架(http://hadoop.apache.org/),用java語言實現開源軟件框架,實現在大量計算機組成的集羣中對海量數據進行分佈式計算。Hadoop框架

原创 Hadoop分佈式集羣搭建完全詳細教程

Hadoop分佈式集羣環境搭建步驟如下 實驗環境: 系統:win7 內存:8G(因要開虛擬機,內存建議不低於8G) 硬盤:建議固態 虛擬機:VMware 12 Linux:Centos 7 jdk1.7.0_67 hadoop-2.5.0.

原创 Hadoop從安裝Linux到搭建集羣環境

簡介與環境準備  hadoop的核心是分佈式文件系統HDFS以及批處理計算MapReduce。近年,隨着大數據、雲計算、物聯網的興起,也極大的吸引了我的興趣,看了網上很多文章,感覺還是雲裏霧裏,很多不必要的配置都在入門教程出現。通過思考總結

原创 Hadoop用戶啓動hdf幾個進程

詳細的修改步驟: 啓動的三個進程:namenode: hadoop-01 bin/hdfs getconf -namenodesdatanode: localhost datanodes (using default slave

原创 大數據解決方案、介紹如何快速入門

Hadoop是一個開源框架,它允許在整個集羣使用簡單編程模型計算機的分佈式環境存儲並處理大數據。它的目的是從單一的服務器到上千臺機器的擴展,每一個臺機都可以提供本地計算和存儲。“90%的世界數據在過去的幾年中產生”。 由於新技術,設備和類似

原创 Python面試官問Redis的相關問題,看完這篇文章就夠了

最近寫了一篇自己搭建redis集羣並在自己項目中使用的文章,今天早上看別人寫的面經發現redis在面試中還是比較常問的(我是python方向)。所以查閱官方文檔以及他人造好的輪子,總結了一些redis面試和學習中你必須掌握的問題。事無鉅細,

原创 分佈式微服務架和SOAj架構體系詳解

微服務架構的演變微服務架構的技術體系、社區目前已經越來越成熟。在最初系統架構的搭建,或者當現有架構已到達瓶頸需要進行架構演進時,很多架構師、運維工程師會考慮是否需要搭建微服務架構體系。雖然很多文章都說微服務架構是複雜的、會帶來很多分佈式的問