原创 fluentd學習——fluent-plugin-rewrite插件重寫

fluent-plugin-rewrite  https://github.com/kentaro/fluent-plugin-rewrite#fluent-plugin-rewrite 所謂的插件重寫,以爲現在做的項目理解來

原创 基於fluentd和mongod實現CloudFoundry的日誌收集過程中遇到的問題!(切身感受,遇到什麼寫什麼了)

已經過去快半年了,在草稿箱中記錄了一下當時的學習筆記:(當時悲催的記錄) 1、在啓動fluentd 的時候,進入到fluent.conf 目錄下,執行fluentd -c fluent.conf 如果啓動失敗,出現error    大概

原创 fluentd學習——High Availability (多級fluentd配置)

High Availability (多級fluentd配置) http://docs.fluentd.org/articles/high-availability Fluentd High Availability Configurat

原创 hadoop學習(四)Map/Reduce數據分析簡述-示例-電話通訊清單

    假如我們集羣和僞分佈式hadoop系統已經搭建完畢。我們都會根據官網或一些資料提供的wordcount函數來測試我們系統是否能正常工作。假設,我們在執行wordcount函數,都沒有問題。那我們就可以開始寫M/R程序,開始數據分析

原创 fluentd學習——配置文件Config File(關鍵)

配置文件Config File(關鍵)   http://docs.fluentd.org/articles/config-file Overview  概述 The configuration file allows the u

原创 回來

 回來     今天,算是起來的最早的一天嗎?但已有人早早的出門了。有的時候,真的想去多想想,以前的日子,但是又同時提醒自己打住。那都已經過去了。     人,總是會在別人的眼中發現自己。以前總是一種,桀驁不馴的,無所謂的態度。

原创 一位數據挖掘成功人士給數據挖掘在讀研究生的建議

關於數據挖掘方面的研究,我原來也走過一些彎路。其實從數據挖掘的起源可以發現,它並不是一門嶄新的科學,而是綜合了統計分析、機器學習、人工智能、數據庫等諸多方面的研究成果而成,同時與專家系統、知識管理等研究方向不同的是,數據挖掘更側重於應用

原创 Javascript 面向對象編程

不是今天了,有半年了,當時學習記錄的筆記: 今天在看項目文件的時候,看到最基本的一句話: <script type="text/javascript" src="/js/myScript.js"></script>  可能是以前學的東

原创 hadoop學習(二)ubuntu下安裝virtual box 問題與解決

在官網下載virtual box  linux版本。我選擇的是32位的系統。 http://download.virtualbox.org/virtualbox/4.3.6/virtualbox-4.3_4.3.6-91406~Ubunt

原创 知識圖譜技術的演進

知識圖譜技術的演進 簡述     “圖譜”是指進過系統編輯並根據實物描述或攝製的圖,是研究某一學科所用的資料。“圖譜”中的“圖”指的是地圖,“譜”指系統,圖與譜合一則是空間與時間動態變化的統一表述。圖譜主要表現事物和現象的形態結構、成

原创 hadoop學習(三)hadoop集羣從windows移植到linux中問題與技巧

       在開始講Map-Reduce數據分析之前,首先講解一下,這兩天遇到的問題,自己在這上面確實是耽誤了很多時間:希望爲自己或後來者提供經驗。 (一)昨天在集羣中測試,由於把集羣全部移植到linux下,解決了virtualbox虛

原创 hadoop學習(一)hadoop-1.2.1僞分佈式配置及遇到的問題

簡化可行安裝:如果一遍啓動有問題,刪了,再一遍,三遍過後,第四遍,你知道問題出現在哪兒了! 1.JDK 安裝:下載路徑 http://www.oracle.com/technetwork/java/javase/downloads/jd

原创 選擇的感觸

  選擇的感觸          前天,早上9:30一切正常的開完會。向超哥,問了點昨天出現的正則如何匹配的問題。然後問了下劉老師,出現的問題。回來,不到半個小時,然後是接到劉老師的電話,在QQ上沒接到。讓我上去一下,上去之後,什麼也沒有

原创 再給我點時間

再給我點時間     到週末了,他們可以回去安心的休息兩天了。我,可以坐下來,安靜的想想了。     總告訴自己,是時候該總結了。我想記錄下這一段時間的心路歷程,不是想以後能爲其所用,只是想真實的想告訴自己,每一步都很艱難,但沒有

原创 fluentd學習——tail(輸入插件)

tail(輸入插件) http://docs.fluentd.org/articles/in_tail tail Input Plugin The in_tail Input plugin allows Fluentd to read e