原创 java的基本數據類型

package com.ce.test; class Test {     static byte b;       static short s;       static int i;       static long l;    

2019-04-23 19:49:13

原创 linux腳本ssh遠程啓動大數據組件失敗，本地啓動成功

https://blog.csdn.net/linghuchong_huashan/article/details/77885841 問題場景： hadoop集羣部署在虛擬機上，每次開機都要重新啓動集羣，所以想寫一個腳本來意見啓動所有服務

2018-12-07 19:42:46

原创 spark 連接kafka API 講解

轉自： http://blog.leanote.com/post/kobeliuziyang/Spark2.x%E8%BF%9E%E6%8E%A5Kafka spark 連接kafka API 各參數詳細講解 一 Spark連接Kafka

2018-11-26 22:36:50

原创 spark廣播變量講解

spark 廣播變量講解 https://blog.csdn.net/weixin_41804049/article/details/79903472 個人理解： spark driver 會將普通變量發送到每個task中，如果該變量特別

2018-11-26 22:36:50

原创 crontab 定時執行腳本出錯，但手動執行腳本正常

原因： crontab 沒有去讀環境變量，需要再腳本中手動引入環境變量，可以用source 也可以用export 寫死環境變量。 案例：     用crontab定時執行一個腳本，這個腳本完成執行java程序的功能； 在用sh 手動執行腳

2018-11-23 04:26:49

原创 ProcessBuilder 和Process的 區別

在面試的時候被問到過 java在本地執行命令時是否遇到過問題？ 當時就想到了之前遇到的 執行長輸出的命令會卡住的情況，用Runtime.exe() 執行命令，當命令的輸出過長時，會導致程序卡住，當時查的網上資料解決了這個問題，開啓了2個線

2018-11-20 04:55:33

原创 java編譯時加入調試信息

https://blog.csdn.net/wubai250/article/details/8481357   java編譯時加入調試信息。   javac -g eclispe 通過設置 

2018-11-20 04:55:33

原创 多線程總結-java

Java 多線程學習 Java-Interview/MD/collection/HashSet.md   線程基礎 線程概念、好處 概念：   線程是操作系統調度的最小單元，也叫輕量級進程，在一個進程裏可以創建多個線程，這些線程都擁有各自

2018-08-28 02:06:51

原创 hive sql 總結

一、HQL： where 過濾篩選 (map 任務) select ,update ,delete ,insert into （在分組語句group by之前執行） select * from emp where sal >300

2018-08-28 02:06:51

原创 JVM內存模型和性能優化

http://www.jdon.com/idea/jvm.html  淘到了好文章，一定要抽時間仔細看看JVM內存模型優點內置基於內存的併發模型：      多線程機制同步鎖Synchronization大量線程安全型庫包支持基於內存的併

2018-08-28 02:06:51

原创 hiveserver2 是什麼？

https://www.cnblogs.com/xiaozhang123/p/7310980.html    工作上一直負責hive的打包，總是有人問hiveserver2是做什麼的？ 我的回答只是可以用JDBC連hive，可遠程對hiv

2018-08-28 02:06:51

原创 java定時器總結

https://blog.csdn.net/etttttss/article/details/7461371 今天看到這篇文章，對定時器總結的很清楚，拿來看看  在現實生活中，會出現這樣的例子，比如燒水，一般燒了20分鐘後，水開了，會需要

2018-08-28 02:06:51

原创 HTTPFS 安裝步驟及驗證

昨天安裝hdfs httpfs，遇到了幾個問題，總是訪問不成功，但在網上也查不到答案，今天總結一下： 一、httpfs是什麼？ 參考：http://debugo.com/hdfs-httpfs/ 官網：http://hadoop.apac

2018-08-28 02:06:51

原创 centos 6.x 配置yum源（本地、網絡）

轉自 ： http://blog.csdn.net/allen_a/article/details/51198585 一、本地yum源 1、系統默認已經安裝了可使用yum的軟件包，所以可以直接配置： [root@localhos

2018-08-28 02:06:51

原创 spark編譯安裝

spark  中文網站： https://blog.csdn.net/u012185296/article/details/76855770https://blog.csdn.net/yu0_zhang0/article/details/

2018-08-28 02:06:51