原创 MapReduce的Job性能調優
最近在學習如何對Job的性能調優，大概主要有以下幾點： 一、通過combiner來減少網絡流量 二、map與reduce的數量 三、減少小文件的輸入 四、調整拉取map結果的線程數 五、使用壓縮 六、重用JVM 七、儘量讓reduce m
2018-08-27 19:19:47
2
原创 Java反射機制（Reflection ）
在說反射之前，讓我們先來想一下這個問題：我們是否能調用某個類的私有方法或者私有成員變量呢？？？ 我相信很多童鞋都會說：不能！ 回答“不能”的童鞋，相信理由大家都懂，針對private的成員變量，只允許當前類的方法對其進行調用，這也就是
2018-08-27 19:19:47
1
原创 使用synchronized需要注意的一個問題
我們知道，在java中，每個對象都持有一把對象鎖，這是在java語言層實現的機制（不同於java.util.concurrent包的lock），因此不需要顯式去釋放鎖。 當我們談到synchronized這個關鍵字，大夥第一時間想到的，
2018-08-27 19:19:47
原创 ubuntu 登陸界面無法輸入密碼
文章出處，點擊查看 今天因爲重啓網卡而卡機，出門回到宿舍發現系統並不黑屏了，處於正常登錄界面，看到還小開心了一會，不過當我輸入密碼的時候，發現鍵盤不能用，所以google到了這一篇文章，雖然我解決的辦法是強制重啓，但還是轉載過來，用
2018-08-27 19:19:46
2
原创 win7中的eclipse連接虛擬機中Linux(Ubuntu)的Hadoop (附上配置時遇到的錯誤和解決的方法)
參考文檔： http://blog.csdn.net/hitwengqi/article/details/8008203 http://my.oschina.net/vigiles/blog/132289 Hadoop的運行模式共有三種
2018-08-27 19:19:46
原创 做爲技術人員爲什麼要寫博客
原文出處：Zery-zhang的博客 本文只代表個人見解，不代表任立場，如果您認爲我的想法是錯的那很正常，因爲這是我的想法，如果您覺得您的想法和我一樣，那我們就是傳說中的 "激友"（對生活衝滿激情的朋友）。進入正題 一 我心中的博客
2018-08-27 19:19:46
原创 解決Ubuntu設置靜態IP地址後重啓不能上網的問題
在搭建Hadoop環境的時候，發現在ubuntu設置靜態IP地址後，上不了網；直到看了這篇文章（參照文章出處，請點擊）才解決該問題。 文章中也提到，如果是在/etc/resolv.conf添加DNS，由於Ubuntu 有一個 resolv
2018-08-27 19:19:46
原创 HDFS的特點和目標
HDFS特點與目標，原文出處 Hadoop Distributed File System，簡稱HDFS，是一個分佈式文件系統。HDFS有着高容錯性（fault-tolerent）的特點，並且設計用來部署在低廉的（low-cost）硬件
2018-08-27 19:19:45
原创 Ubuntu下使用PRM包安裝MySQL5.1.72
請下載Server和Client兩個PRM包，點擊下載：百度雲盤下載MySQL的prm安裝包，裏面也有deb安裝包，deb安裝包是我自己在安裝的時候，自己轉換的 但是這裏我們需要注意，如果我們在Ubuntu直接用命令‘rpm -ivh
2018-08-27 19:19:45
2