原创 Shell腳本編寫教程

 建立一個腳本   Linux中有好多中不同的shell,但是通常我們使用bash (bourne again shell) 進行shell編程,因爲bash是免費的並且很容易使用。所以在本文中筆者所提供的腳本都是使用bash(但是在

原创 Hadoop的安全模式

NameNode在啓動的時候首先進入安全模式,如果datanode丟失的block達到一定的比例(dfs.safemode.threshold.pct),則系統會一直處於安全模式狀態即只讀狀態。 dfs.safemode.threshol

原创 Linux Mint下中文輸入法的配置

1. 直接執行:sudo apt-get install ibus                        (可選) sudo apt-get install ibus-pinyin ibus-pinyin-db-android

原创 終於配好Hadoop

經過5天的奮戰,終於在兩個節點的虛擬機上配好了Hadoop分佈式環境,mark一下。 主要是由於自己技術底子不好,以前沒用過Linux,也不搞開發,家裏電腦出問題了一般都是老公出面搞定的,哎…… 接下來是更爲艱鉅的,算法並行化設計,以及分

原创 win 7 home版R package打包、發佈、安裝

 首先,當然需要安裝好R(假設安裝目錄爲C:\Program Files\R\R-3.0.2)和Rtools(假設安裝目錄爲C:\Rtools)。如果需要生成pdf文檔,還需安裝一個TeX工具(MikTex或CTeX,假設安裝的是Mi

原创 Hadoop操作HDFS命令

轉載自:http://www.juziku.com/sunlightcs/wiki/6017.htm hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目錄及文件信息 hadoop fs

原创 hadoop 創建用戶及hdfs權限,hdfs操作等常用shell命令

添加一個hadoop組 sudo addgroup hadoop 將當前用戶larry加入到hadoop組 sudo usermod -a -G hadoop larry 將hadoop組加入到sudoer sudo gedit etc/

原创 Ubuntu 查看和殺死進程

查看進程: 1,ps -ef 命令 2,sudo netstat -antupActive Internet connections (servers and established)Proto Recv-Q Send-Q Local A

原创 Linux下tar bz gz等壓縮包的壓縮和解壓

轉自http://biancheng.dnbcw.info/linux/300588.html 解壓就用得挺熟的了,突然不知道怎樣壓縮。。。慚愧。。   這是網上提供的方法:   .Tar.gz  解壓:Tar zxvf FileNam

原创 netstat命令

netstat -tuln | grep 端口號 或 netstat -an | grep 端口號 察看端口狀態 netstat -nat 察看已開啓的端口

原创 關閉/打開防火牆

關閉防火牆: 命令:sudo ufw disable 打開防火牆 命令:sudo ufw enable

原创 Hadoop虛擬集羣的搭建

主要參考: 1. http://blog.csdn.net/bluetropic/article/details/9335675 2. http://blog.csdn.net/hguisu/article/details/7237395

原创 hdfs命令操作

轉載自:http://www.dreamflier.net/blog/user1/3/2405.html   查看 hadoop fs   建目錄 hadoop fs -mkdir /user/cloud/test   列當前目錄 had

原创 近期計劃

1. 並行平臺搭建和使用, 並行程序開發和調試. 2. 統計學習ESL 3. Bayes和Empirical Bayes推理 4. Bioinformatics算法及應用基礎

原创 linux上安裝QQ(QQ版本太低已不支持)

1.通過軟件管理中心,或在終端安裝(假設版本爲1.5)安裝wine。 sudo add-apt-repository ppa:ubuntu-wine/ppa sudo apt-get update sudo apt-get instal