原创 YARN調試過程中的常見問題

執行操作:hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.0.jar wordcount  /user/today/input  /user/today/out

原创 kafka安裝與測試

基於linux-Centos7.0環境先進行測試學習Producer即生產者,向Kafka集羣發送消息,在發送消息之前,會對消息進行分類,即Topic, Topic即主題,通過對消息指定主題可以將消息分類,消費者可以只關注自己需要的Top

原创 MyBatis Generator的使用

對於自動生成這件事吧,我本人中立,一直沒用過,主要是因爲淺嘗輒止,它生成的東西有些懶得看,用一下還是挺舒服的自動生成的文件:mapper.xml 、model、dao一、下載MyBatis Generator的核心jar包和配置文件  官網

原创 教你如何用筆記本設置超快WIFI

以win7爲例1.在主菜單運行框輸入  cmd------->以管理員的身份運行2.命令提示符中輸入:netsh wlan set hostednetwork mode=allow ssid=wifi名稱   key=wifi密碼(8位以上

原创 HDFS的WEB頁面訪問常見問題

HDFS的WEB UI管理頁面 50070 端口 無法訪問解決辦法!本文基於HADOOP-3..1.0,Cecntos7.0環境下進行測試,所以遇到很多新鮮的問題;特別注意:HaDoop3.0之前web訪問端口是50070   hadoop

原创 jetty服務器原理與maven集成

jetty服務器原理+MyEclipse下與Maven集成 Jetty 是一個開源的servlet容器,它爲基於Java的web容器,例如JSP和servlet提供運行環境。Jetty是使用Java語言編寫的,它的API以一組JAR包的

原创 SSH免密碼登錄配置

ssh免密碼登錄Permission denied (publickey,gssapi-keyex,gssapi-with-mic) 的解決方案1.在hadoop目錄 新建.ssh目錄使用:ssh-keygen -t rsa 生成公私鑰默認

原创 YARN的基礎配置

基於HADOOP3.0+Centos7.0的yarn基礎配置;執行步驟:(1)配置集羣yarn (2)啓動、測試集羣(3)在yarn上執行wordcount案例一、配置yarn集羣 1.配置yarn-env.sh 添加:export JA

原创 哈夫曼樹【最優二叉樹】【Huffman】

【轉載】只爲讓價值共享,如有侵權敬請見諒!一、哈夫曼樹的概念和定義什麼是哈夫曼樹?讓我們先舉一個例子。判定樹:        在很多問題的處理過程中,需要進行大量的條件判斷,這些判斷結構的設計直接影響着程序的執行效率。例如,編制一個程序,將

原创 lambda表達式

Lambda表達式的語法 基本語法: (parameters) -> expression 或 (parameters) ->{ statements; } 下面是Java lambda表達式的簡單例子: [java] view plain

原创 文件操作

C++通過以下幾個類支持文件的輸入輸出(1)      ofstream:寫操作,輸出文件類;(2)      ifstream:讀操作,輸入文件類;(3)      fstream:可同時讀寫的文件類。1.     open函數:打開文件

原创 JAVA庫函數總結【持續更新】

生成隨機數: Math.random()是令系統隨機選取大於等於 0.0 且小於 1.0 的僞隨機 double 值. Random rand = newRandom(); rand.nextInt(int s);//生成0~s內的整數 i

原创 poj 2681 字符串

http://poj.org/problem?id=2681給你任意長度的字符串,找出兩串字符中不相同的字符個數(總數)#include<string> #include<cstring> #include<iostream> #inclu

原创 JAVA中Sql時間格式與util時間格式轉換

關於時間格式轉化:java.util.Date 與 java.sql.Date 互換sql是子類字符串轉化成java.util.Date    SimpleDateFormat date =new SimpleDateFormat("yyy

原创 poj 2503 查字典

DescriptionYou have just moved from Waterloo to a big city. The people here speak an incomprehensible dialect of a forei