原创 Hadoop YARN配置參數剖析(1)—RM與NM相關參數

注意,配置這些參數前,應充分理解這幾個參數的含義,以防止誤配給集羣帶來的隱患。另外,這些參數均需要在yarn-site.xml中配置。1.    ResourceManager相關配置參數(1) yarn.resourcemanager

原创 Hive元數據解析

轉自 : http://www.2cto.com/database/201311/255627.html Hive元數據解析 Hive元數據解析   本文是筆者初步整理的Hive元數據表,有不準確的地方請輕拍,後續我會補

原创 深入學習Tomcat----自己動手寫服務器(附服務器源碼)

深入學習Tomcat----自己動手寫服務器(附服務器源碼) 轉自:http://blog.csdn.net/beijiguangyong/article/details/7439352#comments 相信大多Web開發者對T

原创 JVM學習筆記(第一天)

一、Java內存區域與內存溢出 學習目的:解決內存溢出與內存泄露 1、運行時數據區域 五大區域: 程序計數器(Program Counter Register):         描述:可以看作當前線程所執行的字節碼的行號指示器

原创 用反射和內省技術實現簡單 SpringIOC

轉自:http://blog.csdn.net/newjueqi/archive/2009/06/03/4238602.aspx 【文章標題】用反射和內省技術實現簡單 SpringIOC 【文章作者】曾健生 【作者郵箱】 zengji

原创 hive 數據導入的四種方法

問題導讀1.從本地文件系統中通過什麼命令可導入數據到Hive表?2.什麼是動態分區插入?3.該如何實現動態分區插入? 擴展:這裏可以和Hive中的三種不同的數據導出方式介紹進行對比? Hive的幾種常見的數據導入方式 這裏介紹四種: (

原创 Nginx + tomcat + memcache (負載均衡+session共存)

Nginx + tomcat + memcache (負載均衡+session共存)一、 Nginx + tomcat負載均衡配置(4步)1. 爲yum增加epel的源,命令: yum install e

原创 nfs網絡文件系統

通過NFS可以將遠程主機的目錄(ARP1:/ora1159)掛裝(Mount)爲本地主機的一個目錄(ARP2:/home1),如同存取本機文件一樣,存取遠程主機的文件。具體設置包括遠程主機和本地主機的設置

原创 spring中的設計模式

轉自:http://ylsun1113.iteye.com/blog/828542 我對設計模式的理解:  應該說設計模式是我們在寫代碼時候的一種被承認的較好的模式,就像一種宗教信仰一樣,大多數人承認的時候,你就要跟隨,如果你想當一個

原创 Flume(NG)架構設計要點及配置實踐 Flume NG是一個分佈式、可靠、可用的系統,它能夠將不同數據源的海量日誌數據進行高效收集

Flume(NG)架構設計要點及配置實踐 Flume NG是一個分佈式、可靠、可用的系統,它能夠將不同數據源的海量日誌數據進行高效收集、聚合、移動,最後存儲到一箇中心化數據存儲系統中。由原來的Flume OG到現在的Flume NG,進

原创 Nginx + Tomcat 動靜分離

nginx.conf配置     user  www www;             worker_processes 8;             error_log  /usr/local/ngin

原创 Hive自定義UDAF詳解

Hive自定義UDAF詳解         遇到一個Hive需求:有A、B、C三列,按A列進行聚合,求出C列聚合後的最小值和最大值各自對應的B列值。這個需求用hql和內建函數也可完成,但是比較繁瑣,會解析成幾個MR進行執行,如果自

原创 LVS+keepalived負載均衡

LVS+keepalived負載均衡  背景:          隨着你的網站業務量的增長你網站的服務器壓力越來越大?需要負載均衡方案!商業的硬件如F5又太貴,你們又是創業型互聯公司如何有效節約成本,節省

原创 Linux的用戶和用戶組管理

Linux的用戶和用戶組管理  Linux是個多用戶多任務的分時操作系統,所有一個要使用系統資源的用戶都必須先向系統管理員申請一個賬號,然後以這個賬號的身份進入系統。用戶的賬號一方面能幫助系統管理員對使用系統的用戶進行跟蹤,並控制他們對系

原创 Spring+Redis集成+關係型數據庫持久化

Spring+Redis集成+關係型數據庫持久化 本篇文章主要介紹了"Spring+Redis集成+關係型數據庫持久化",主要涉及到Spring+Redis集成+關係型數據庫持久化方面的內容,對於Spri