原创 flume接收kafka source落地本地

flume接收kafka source落地本地,然後上傳hdfs,避免flume直接上傳hdfs maven工程 pom.xml <version.flume>1.7.0</version.flume> <dependency> <gro

原创 go學習文檔

http://www.flysnow.org/categories/Golang/page/5/

原创 mac實戰mesos

如果程序一直deploy說明一定有問題 mac安裝 brew install mesos brew upgrade mesos 啓動zookeeper 啓動master HOST_IP=100.80.128.98 sudo /usr/lo

原创 binaryTree遍歷

前序遍歷的輸出結果:ABDECF 中序遍歷的輸出結果:DBEAFC 後序遍歷的輸出順序:DEBFCA https://www.cnblogs.com/turnips/p/5096578.html 前序遍歷的規則: (1)訪問根節點 (2)

原创 lease機制

lease,即租約,是個強大的東西。 lease用於緩存  先看緩存的lease。假設每個client都去server取數據,server可能成爲性能瓶頸。然後就有了緩存,client每看看自己有沒有相應的緩存,沒有才去找server要。但

原创 SQL求相互關注的人數和關注了4的總關注數

求互相關注的人數? select count(1) from tst t1 inner join tst t2 on t1.uid = t2.uuid and t1.uuid = t2.uid; 求關注了4的總關注數? select cou

原创 mysql limit offset

SQL中LIMIT和OFFSET的用法中哪種效率高些? 比如:SQL1 = "SELECT * FROM user LIMIT 0,20" SQL2 = "SELECT * FROM user OFFSET 0 LIMIT 20" 這兩種

原创 hadoop求推薦好友-2度關係

推薦好友 a -> b,c,d b -> a,c,e ------------- a-b ab_cd a-c ac_bd a-d ad_bc b-a ba_ce b-c bc_ae b-e

原创 hadoop求共同好友

https://blog.csdn.net/datadev_sh/article/details/73550857

原创 flume源碼

http://www.cnblogs.com/lxf20061900/p/3667824.html

原创 docker網絡

http://udn.yyuap.com/article-11989.html 入門學習 https://www.jianshu.com/u/8221a3172369

原创 go特點

go已經從語言層面上支持了 看起來似乎沒什麼亮點,沒有高級的特性 但是樸實,解決的是實實在在寫代碼的人的痛點

原创 elk

Elasticsearch 5.4已經不支持刪除一個type了 https://blog.csdn.net/leafage_m/article/details/74011357 1、刪除索引,重建 2、_delete_by_query刪除t

原创 Hive 支持多表數據插入

Hive支持多表插入,可以在同一個查詢中使用多個insert子句,這樣的好處是我們只需要掃描一遍源表就可以生成多個不相交的輸出! from test1 insert overwrite table test2  partition (ag