原创 多重for循環嵌套

for循環定義: 同過一個簡單的表達式,來完成多次重複性的代碼功能;格式如下: for(變量初始值;變量取值範圍;變量自增/自減){ //代碼塊; } 一個複雜的for循環中可以嵌套多個同級的for循環,一般表現如下:

原创 Hadoop環境搭建,以及mapreduce的使用

Hadoop2.5環境搭建 1. 解壓安裝Hadoop 命令: $ tar -zxf hadoop-2.5.0.tar.gz -C /opt/modules/ 2. 配置Hadoop的JAVA支持(/etc/hadoop

原创 計算機初學者需要知道的一些DOS命令

第1、最常用的命令 cd     改變當前目錄       sys   製作DOS系統盤 copy    拷貝文件         del   刪除文件 deltree   刪除目錄樹           dir   列文件名 diskc

原创 開了安全的kafka集羣配置需要更改的參數

Three brokers for kafkaFirst: cat /etc/kafka1/conf/jaas.conf  --check jaas.conf  KafkaServer {  com.sun.security.auth.m

原创 Hadoop Ha (High avilable)配置

爲什麼要配置HDFS HA?   首先:HDFS集羣中NameNode 如果存在單點故障。對於只有一個NameNode的集羣,如果NameNode機器出現意外情況,將導致整個集羣無法使用. 而影響HDFS集羣不可用主要包括以下兩種情況

原创 一個基礎的多線程問題,記錄學習多線程

一:創建多線程的方法 : A:繼承Thread類,重寫run()方法; B:實現Runnable接口,重寫run()方法; 二:兩種實現的區別 : 1.在於實現和繼承的區別:單繼承,多實現; 2.在於資源共享的區別

原创 I don't know where is the sky that I can touch

有時候也曾幻想過自己坐在一輛不知開往何處的, 也不知何時會停止的,但是印象中像是可以找尋到愛的列車, 我並不知道自己想要表達些什麼, 但就是想要知道人在最累的時候, 通常會幻想自己處在一個什麼樣的環境, 才能夠真正的放開一切雜念

原创 MR的shuffer過程

圖例: map個數:由任務切片spilt決定的,默認情況下一個split的大小就是block 由參與任務的文件個數決定的  maxSize:由配置參數mapred.max.spilt.size確定,已經不考慮用戶設定的maptask

原创 stream延時十分鐘處理數據

解決方案: 用plsql來處理邏輯 用戶點擊產生日誌-->flume收集日誌-->傳給kafka中的消息隊列-->創建stream表接收流中的數據-->將數據插入hyperbase中,時間戳拼接uuid做主鍵-->從hyperbase中按

原创 十個不錯的javascript知識,也許會對你有幫助

1.立即執行函數 (function(){//代碼片段})(); 對的,你沒有看錯,很簡單的一個寫法,不用寫windows.onload也可以立即執行的函數,這裏面的function(){…}是一個匿名函數,包圍它的一對括號將其轉換爲一

原创 Notepad++遠程連接ssh修改linux中配置文件

去百度搜索下載這個文件 將這個插件放到notepad++中的安裝目錄中的plugins目錄中; 第一步:點擊這個按鈕,查看右側變化 第二步: 第三步:點擊profile setting 第四步:創建連接

原创 MySQL安裝圖解

MySQL安裝圖解 一、MYSQL的安裝 1、雙擊打開mysql-5.5.27-win32.msi進行安裝”。 選擇我同意 2、選擇安裝類型,有“Typical(默認)”、“Complete(完全)”、“Custom(用戶自定義)