原创 hadoop could only be replicated to 0 nodes instead of 1 解決方法

修改了replication後,執行hive語句報錯如下: hive> select count(1) from weblog; Total MapReduce jobs = 1 Launching Job 1 out of 1 Numb

原创 Hive中SELECT TOP N的方法(order by與sort by)

原文地址:http://blog.sina.com.cn/s/blog_6ff05a2c0101eaxf.html 我想說的SELECT TOP N是取最大前N條或者最小前N條。 Hive提供了limit關鍵字,再配合order by可

原创 IIS7日誌中時間與系統時間不一致的原因

最近在分析web日誌,發現IIS7日誌中時間與系統時間不一致,即本該上班時間才產生的產併發訪問日誌,全部發生在凌晨至上班前。 本以爲是系統時間設置錯誤,檢查後一切正常。後查詢資料,原來是這個原因: 日誌的格式有IIS、NCSA、W3C三種

原创 執行hive語句時報ALLOW_UNQUOTED_CONTROL_CHARS

在hive中執行普通查詢沒有問題。 hive> select * from weblog w where w.accdate='2013-06-15' limit 20; 但執行like時,就報錯, select * from weblo

原创 hive中的Order By

原文地址:http://www.oratea.net/?p=622 hive中的order by也是對一個結果集合進行排序,但是和關係型數據庫又所有不同。 這不同的地方也是兩者在底層架構區別的體現。 hive的參數hive.mapred.

原创 Windows2003/2000 Server(32bit) extends memory:最大內存問題

本文介紹瞭如何在系統內存大於4G的情況下,讓windows2000 Advanced Server/windows2003支持大內存的方法由於Windows2003 32bit是32位操作系統,當服務器配備內存高達4G時將出現系統屬性中無

原创 分離刪除附加數據庫

declare @sqldbname varchar(200) declare @sql varchar(1000) set @sqldbname = 'dbname' set @sql = ' use '+@sqldbname+' d

原创 UUID做主鍵,好還是不好?這是個問題

  我唯一還算熟悉的數據庫就算是MySQL了,大概使用MySQL的人,百分之九九以上的人會使用Autoincrement ID做主鍵,這是可以理解的,因爲MySQL的自增ID效率很高,使用也很方便。那麼剩下的百分之一的人使用什麼做主鍵呢?

原创 hadoop hive的安裝

以下是本人hive的安裝過程: hive 是Hadoop中最常用的工具,可以說是必裝工具。 按apache官方文檔,推薦使用svn下載後編譯,文檔地址:https://cwiki.apache.org/confluence/displa

原创 XXX郵件的一段代碼

不小心點開了郵件的一段代碼 這是什麼語言寫的? #!/usr/bin/perl -wuse strict;use POSIX;use IO::Socket;use CGI::Fast qw(:standard);use CGI::Cook

原创 經典誤會

事情的開頭是這樣的:   我的一個表姐因爲星期天要加班,表姐夫那天去考駕照,就把5歲的兒子鬧鬧送來我家,請我幫忙照看一天。   我怕鬧鬧不聽話,特意去市場給他買了只可愛的小白兔。   鬧鬧問我兔子吃什麼,我就告訴他吃胡蘿蔔和一切綠色蔬菜。

原创 Sql Server 2005 從差異備份還原數據庫

差異數據庫還原的語法與完整數據庫還原的相同,只是完整數據庫還原必須要執行在附加差異備份之前。當還原完整數據庫備份時,數據庫必須置爲NORECOVERY模式。而且任何你希望還原的事務日誌必須在附加了差異備份之後完成,正如示例所演示的。 首先

原创 網頁新手進階祕技

  許許多多的網頁新手正徘徊在專業編碼的門檻前,而網上的教程參差不齊,魚龍混雜,很容易讓新手迷茫。這裏總結了30條網頁編碼的“祕技”,只要在編碼過程中牢記它們,靈活運用,你一定會寫出一手漂亮的代碼,早日邁入專業開發者的行列。 1. 一定

原创 一個realplay直接播放ftp上電影的插件

最近做了一個realplay直接播放ftp上電影的插件。前以大家看ftp上的電影都是先下載下來,再看,這樣往往下載下來的電影並不是我們喜歡的電影類型,又刪除。有了這個插件,就方便了,直接在線觀看ftp上的電影,非常方便. 大家看看有沒有市

原创 修改dfs.relication值後如何生效

修改master節點的hdfs-site.xml文件中dfs.relication值後,重啓hadoop和執行hadoop balancer,均不能使該設置生效, 使用hadoop fsck /查看,Average blockrepli