linux批量計算時間差腳本——awk

今天碰到一個時間差批量計算的問題,弄好後就寫下來,方便積累和分享。

180940926.png

部分數據(一共有40多W條,gmail.csv )如上圖所示,已經做過二次處理和排版。

第i行前兩列時間記作A[i],後兩列記作B[i],需要計算平均延遲∑(A[i]-B[i]) /I,以及最大延遲Max(A[i]-B[i])

平均值:

[root[root@test01 test]# awk -F '[ :-]' '{a=strftime("%s",mktime($1" "$2" "$3" "$4" "$5" "$6));b=strftime("%s",mktime($7" "$8" "$9" "$10" "$11" "$12));c=a-b;sum+=c}END{print sum/NR}' gmail.csv

最大值:

[root@test01 test]# awk -F '[ :-]' '{a=strftime("%s",mktime($1" "$2" "$3" "$4" "$5" "$6));b=strftime("%s",mktime($7" "$8" "$9" "$10" "$11" "$12));c=a-b;if(c>max)max=c}END{print max}' gmail.csv


知識點:awk自帶的時間函數


函數名說明
mktime( YYYY MM DD HH MM SS[ DST])生成時間格式
strftime([format [, timestamp]])格式化時間輸出,將時間戳轉爲時間字符串
具體格式,見下表.
systime()得到時間戳,返回從1970年1月1日開始到當前時間(不計閏年)的整秒數


創建指定時間(mktime使用)

[chengmo@centos5 ~]$ awk 'BEGIN{tstamp=mktime("2001 01 01 12 12 12");print strftime("%c",tstamp);}'
2001年01月01日 星期一 12時12分12秒


[chengmo@centos5 ~]$ awk 'BEGIN{tstamp1=mktime("2001 01 01 12 12 12");tstamp2=mktime("2001 02 01 0 0 0");print tstamp2-tstamp1;}'
2634468

求2個時間段中間時間差,介紹了strftime使用方法


[chengmo@centos5 ~]$ awk 'BEGIN{tstamp1=mktime("2001 01 01 12 12 12");tstamp2=systime();print tstamp2-tstamp1;}'
308201392


strftime日期和時間格式說明符

格式描述
%a星期幾的縮寫(Sun)
%A星期幾的完整寫法(Sunday)
%b月名的縮寫(Oct)
%B月名的完整寫法(October)
%c本地日期和時間
%d十進制日期
%D日期 08/20/99
%e日期,如果只有一位會補上一個空格
%H用十進制表示24小時格式的小時
%I用十進制表示12小時格式的小時
%j從1月1日起一年中的第幾天
%m十進制表示的月份
%M十進制表示的分鐘
%p12小時表示法(AM/PM)
%S十進制表示的秒
%U十進制表示的一年中的第幾個星期(星期天作爲一個星期的開始)
%w十進制表示的星期幾(星期天是0)
%W十進制表示的一年中的第幾個星期(星期一作爲一個星期的開始)
%x重新設置本地日期(08/20/99)
%X重新設置本地時間(12:00:00)
%y兩位數字表示的年(99)
%Y當前月份
%Z時區(PDT)
%%百分號(%)



今天又遇到個日誌問題,寫下來方便以後回頭看和積累:

原始數據類似:G,2013-09-28 00:00:16+0800,2013-09-27 20:05:27+0800,XASHKNWABASDBKW

我只需要標紅的各個字段,代碼如下:

awk -F '[,+]' '{gsub(/-|:/," ",$2);gsub(/-|:/," ",$4);print $2,$4}'

意思是:以,或+分割數據字段,同時將第2個字段中的-或:都替換爲空格;第四個字段也做了相同的操作,並輸出。

輸出格式爲:2013 09 28 00 00 16 2013 09 27 20 05 27


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章