原创 load data local infile 插入100萬慢,4-5分鐘,爲什麼?

  load data local infile文件入庫,如果表字段不多、索引少,2千萬幾分鐘也是正常的,例如,id,name,age,一旦表字段多,索引也多(去掉索引也沒有太大幫助),2千萬入庫庫花費2小時左右時間正常的

原创 hadoop\hive雜說

一般使用問題1、會有集羣本身資源瓶頸,如內存、磁盤等; 2、業務量大,數據處理排隊等候時間長; 3、調度任務管理 ; 4、hive腳本執行參數調優;

原创 關於hadoop 物理/虛擬內存溢出現象

  1、。。。。running beyond physical memory limits. Current usage: 2.0 GB of 2 GB physical memory used; 3.9 GB of 16 GB virt

原创 Azkaban獲取歷史日期

day=$(new("org.joda.time.DateTime").minusDays(1).toString("yyyy-MM-dd"))   具體可看https://github.com/azkaban/azkaban/pull/

原创 關於eclipse標題欄亂碼

打開菜單Window->Preferences ->General->Appearance 在裏面的選項先設置Theme爲classic,接着設置Font theme爲classic theme 這樣就好了,如下圖:

原创 jsoup

jsoup 簡介 jsoup 是一款 Java 的 HTML 解析器,可直接解析某個 URL 地址、HTML 文本內容。它提供了一套非常省力的 API,可通過 DOM,CSS 以及類似於 jQuery 的操作方法來取出和操作數據。

原创 關於maven包衝突

今天建立一個ssm+shiro的maven項目,運行時發現javaee api 6.0.jar和我使用tomcat7.0衝突,結果把javaee a

原创 關於Nginx

Nginx詳解-服務器集羣 Nginx是什麼 代理服務器:一般是指局域網內部的機器通過代理服務器發送請求到互聯網上的服務器,代理服務器一般作用在客戶端。應用比如:GoAgent,FQ神器.    一個完整的代理請求過程爲

原创 jvm優化

jvm調優總結(從基本概念 到 深度優化) 博客分類:  應用服務器相關  關鍵字:jvm調優總結(從基本概念 到 深度優化)  JVM參數詳解:http://www.cnblogs.com/redcreen/archive/

原创 aop配置了還是報錯

在ssm的maven工程中,aop在xml配置裏面常常報錯,即使配置了相應的文件頭還是如此,後面我就把相應的文件的版本號去掉,自己的問題就解決。 報的錯:but no declaration can be found for elem

原创 about log4j

log4j日誌配置  關鍵字: apache log4j  1、配置根Logger:  log4j.rootLogger = [ level ] , appenderName, appenderName2  level:日誌的級別,指定

原创 關於chm文件點擊彈亂碼(win7)

今天有在網上看到別人的好經驗,,在此稍微添加點,我的問題出現是在系統重裝之後,用360下載了很多不定修復之後,很多軟件打開都出現問題,後來卸載360及其相關補丁還是如此,最後,就將控制面板的區域和語言->選擇 ‘’管理‘’ 這個選項,然

原创 shiro.ehcache.xml配置參數

<?xml version="1.0" encoding="UTF-8"?>   <ehcache name="es">       <diskStore path="java.io.tmpdir"/>            <!-- 

原创 struts2單例or多例?

struts2中action是多例的 即一個session產生一個action。 struts 2的Action是多實例的併發單例,也就是每次請求產生一個Action的對象。原因是:struts 2的Action中包含數據,例如你在頁面填

原创 簡單驗證碼

<%@ page language="java" contentType="text/html; charset=UTF-8"     pageEn