原创 Shell腳本編寫教程
建立一個腳本 Linux中有好多中不同的shell,但是通常我們使用bash (bourne again shell) 進行shell編程,因爲bash是免費的並且很容易使用。所以在本文中筆者所提供的腳本都是使用bash(但是在
原创 Hadoop的安全模式
NameNode在啓動的時候首先進入安全模式,如果datanode丟失的block達到一定的比例(dfs.safemode.threshold.pct),則系統會一直處於安全模式狀態即只讀狀態。 dfs.safemode.threshol
原创 Linux Mint下中文輸入法的配置
1. 直接執行:sudo apt-get install ibus (可選) sudo apt-get install ibus-pinyin ibus-pinyin-db-android
原创 終於配好Hadoop
經過5天的奮戰,終於在兩個節點的虛擬機上配好了Hadoop分佈式環境,mark一下。 主要是由於自己技術底子不好,以前沒用過Linux,也不搞開發,家裏電腦出問題了一般都是老公出面搞定的,哎…… 接下來是更爲艱鉅的,算法並行化設計,以及分
原创 win 7 home版R package打包、發佈、安裝
首先,當然需要安裝好R(假設安裝目錄爲C:\Program Files\R\R-3.0.2)和Rtools(假設安裝目錄爲C:\Rtools)。如果需要生成pdf文檔,還需安裝一個TeX工具(MikTex或CTeX,假設安裝的是Mi
原创 Hadoop操作HDFS命令
轉載自:http://www.juziku.com/sunlightcs/wiki/6017.htm hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目錄及文件信息 hadoop fs
原创 hadoop 創建用戶及hdfs權限,hdfs操作等常用shell命令
添加一個hadoop組 sudo addgroup hadoop 將當前用戶larry加入到hadoop組 sudo usermod -a -G hadoop larry 將hadoop組加入到sudoer sudo gedit etc/
原创 Ubuntu 查看和殺死進程
查看進程: 1,ps -ef 命令 2,sudo netstat -antupActive Internet connections (servers and established)Proto Recv-Q Send-Q Local A
原创 Linux下tar bz gz等壓縮包的壓縮和解壓
轉自http://biancheng.dnbcw.info/linux/300588.html 解壓就用得挺熟的了,突然不知道怎樣壓縮。。。慚愧。。 這是網上提供的方法: .Tar.gz 解壓:Tar zxvf FileNam
原创 netstat命令
netstat -tuln | grep 端口號 或 netstat -an | grep 端口號 察看端口狀態 netstat -nat 察看已開啓的端口
原创 關閉/打開防火牆
關閉防火牆: 命令:sudo ufw disable 打開防火牆 命令:sudo ufw enable
原创 Hadoop虛擬集羣的搭建
主要參考: 1. http://blog.csdn.net/bluetropic/article/details/9335675 2. http://blog.csdn.net/hguisu/article/details/7237395
原创 hdfs命令操作
轉載自:http://www.dreamflier.net/blog/user1/3/2405.html 查看 hadoop fs 建目錄 hadoop fs -mkdir /user/cloud/test 列當前目錄 had
原创 近期計劃
1. 並行平臺搭建和使用, 並行程序開發和調試. 2. 統計學習ESL 3. Bayes和Empirical Bayes推理 4. Bioinformatics算法及應用基礎
原创 linux上安裝QQ(QQ版本太低已不支持)
1.通過軟件管理中心,或在終端安裝(假設版本爲1.5)安裝wine。 sudo add-apt-repository ppa:ubuntu-wine/ppa sudo apt-get update sudo apt-get instal