原创 org.bouncycastle.asn1.ASN1Boolean非法循環依賴的錯誤

記錄遇到一次奇怪的錯誤，在發佈war包到Tomcat的時候，出現了org.bouncycastle.asn1.ASN1Boolean非法循環依賴的錯誤。 INFO: Deploying web application directory

2019-04-25 12:42:45

原创 Hive或者Impala查詢錯誤：The query did not generate a result set!

今天在測試Impala的jdbc時，出現了一個很奇怪的錯誤 Exception in thread "main" java.sql.SQLException: The query did not generate a result se

2019-02-21 15:07:06 17

原创 Impala安裝和使用問題彙總

近日調研了Kudu+Impala大數據存儲引擎，在安裝和使用的過程中也遇到不少問題，解決起來也是不容易(原諒我比較菜鳥)，在這裏記錄一下，也當是分享吧。 1.Impala不能創建表，提示權限的問題 具體情況： [data.beta.co

2019-02-21 15:07:06 21

原创 Linux安裝Kudu+Impala(RedHat or CentOS)

首先查看系統的版本，RedHat和CentOs通過 cat /etc/redhat-release 查看版本，這裏我的系統版本是CentOS Linux release 7.3.1611 (Core) 其他系統查看版本參考：https:/

2019-02-20 18:20:01 11

原创 Spark錯誤：class XXX needs to be abstract, since: it has n unimplemented members

一般情況下在Spark項目裏面只會寫一些數據處理的job，但是偶爾也會有一些特別的需求，這裏需要定義一個商品(Sku)的類，寫慣了Java的代碼，寫個bean應該也不難。 class SkuInfo {   var skuCode:

2019-01-19 18:22:01

原创 分享一個JDBC查Hive出現的一個問題

問題詳情，緊急需求臨時搞了一個JDBC查Hive的引擎，根據獲取的ResultSet在內存做計算，需要把ResultSet保留在內存一段時間，但是在後續對ResultSet的處理中出現了錯誤，錯誤詳情： java.sql.SQLExce

2018-11-08 04:22:45 31

原创 恭喜IG獲得S8全球總決賽總冠軍

奪冠的時候看哭了， 解說的抽泣聲， 大家的歡呼聲， 都是最好的證明， 是啊， 過去7年， 從未有過哪怕一次這樣的喜悅， 更多的是失落， 恭喜IG，感謝IG， 圓了LPL所有玩家的一個夢， 恭喜LPL！ LPL拿下了所有能拿的世界賽事的冠軍

2018-11-07 03:34:39

原创 Spark常見問題解決

這倆天總結了在寫Spark Job的時候遇到的一些問題，寫在這裏，以後遇到了方便查看。 1.Error:(64, 64) Unable to find encoder for type stored in a Dataset. Pr

2018-11-04 03:55:13

原创 Shell FTP文件上傳下載

1.上傳文件到ftp 創建一個shell文件：touch upload.sh 修改爲可執行文件：chmod +x upload.sh 編輯：vim upload.sh，腳本內容如下 cd /user/directory/target e

2018-09-26 03:13:09 3

原创 DataX企業實戰應用

目錄 前言 系統架構 關鍵實現 系統目前使用現狀 DataX使用心得 前言 DataX是阿里開源數據同步工具，實現異構數據源的數據同步，Github地址：https://github.com/alibaba/DataX，企業存儲離線數據到

2018-09-06 04:39:51 4

原创 如何在Ubuntu 16.04上增加Swap分區

翻譯自：How To Add Swap Space on Ubuntu 16.04 前言 提高服務器響應速度和防止應用程序內存不足錯誤的最簡單方法之一是添加一些交換空間。 在本指南中，我們將介紹如何將交換文件添加到Ubuntu 16.04

2018-09-03 18:15:24

原创 Git常用命令(夠用)

git checkout -b TS-308320180228git_beta // 本地創建新分支 git status // 查看當前所在的分支以及當前分支的修改狀況，會顯示修改的文件 PS:如果有zsh插件，能直接顯示當前分支，M

2018-09-03 18:15:22

原创 面試題：字符串最長迴文

迴文：正數和倒數相同。如sos,level。 現在給定字符串“er0reviver”要求給出字符串內最長的迴文。寫出代碼輸出結果。 Java: public static String longestPalindrome(String s

2018-09-03 18:15:22

原创 阿里雲MySQL遠程連接失敗

在阿里雲服務器上自己裝了一個MySQL，但是剛剛開始並不能正常連接，其實無非就兩種情況 a.服務器端口攔截 b.MySQL服務拒絕了請求 解決辦法： 針對服務器，將端口開放鏈接，針對MySQL，取消MySQL的連接限制即可 1.MySQL

2018-09-03 18:15:22 2

原创 Guava的ListenableFuture解析

轉自：google Guava包的ListenableFuture解析 併發編程是一個難題，但是一個強大而簡單的抽象可以顯著的簡化併發的編寫。出於這樣的考慮，Guava 定義了 ListenableFuture接口並繼承了JDK conc

2018-09-03 18:15:18 2