原创 kafka 詳細配置(broker)

以下是kafka  broker 詳細配置的參數、默認值、描述 參數 默認值 描述 broker.id -1  每一個boker都有一個唯一的id作爲它們的名字。當該服務器的IP地址發生改變時,broker.id沒有變化,則不會影

原创 Scala模式匹配詳細案例

模式匹配是檢查某個值(value)是否匹配某一個模式的機制,一個成功的匹配同時會將匹配值解構爲其組成部分。它是Java中的switch語句的升級版,同樣可以用於替代一系列的 if/else 語句。 一個模式匹配語句包括一個待匹配的值,ma

原创 hive 常見配置

//顯示列名 set hive.cli.print.header=true; //顯示列名時,不帶表名 set hive.resultset.use.unique.column.names=false;     //修改default數據

原创 不要說你真的懂高性能MySQL

前言 最近做的項目對集羣數據庫性能要求較高,藉此機會打算重新學習、整理Mysql的原理及調優策略,參考梳理《高性能MySQL》第三版、MySQL官方文檔、網絡上前人寫的資料、以及個人實戰經驗總結。在接下來的一段時間內持續更新,希望在提升自

原创 hive 開窗函數的例子

開窗函數   OVER():指定分析函數工作的數據窗口大小,這個數據窗口大小可能會隨着行的變而變化。 CURRENT ROW:當前行 n PRECEDING:往前n行數據 n FOLLOWING:往後n行數據 UNBOUNDED:起點,U

原创 mybatis中標籤的使用

你可以傳遞一個 List 實例或者數組作爲參數對象傳給 MyBatis。當你這麼做的時候,MyBatis 會自動將它包裝在一個 Map 中,用名稱作爲鍵。List 實例將會以“list”作爲鍵,而數組實例將會以“array”作爲鍵。 fo

原创 大數據常見問題彙總

1、用./bin/spark-shell啓動spark時遇到異常:java.net.BindException: Can't assign requested address: Service 'sparkDriver' failed a

原创 redis拒絕連接的解決方案

1.本地防火牆是否關閉 2.服務器的防火牆是否關閉      檢查方法:       service iptables status    查看防火牆狀態   service iptables stop      關閉防火牆   chkc

原创 一起成爲MySQL高性能優化大師-------第一篇(MySQL概述及基本概念)

前言 最近做的項目對集羣數據庫性能要求較高,藉此機會打算重新學習、整理Mysql的原理及調優策略,參考梳理《高性能MySQL》第三版、MySQL官方文檔、網絡上前人寫的資料、以及個人實戰經驗總結。在接下來的一段時間內持續更新,希望在提升自

原创 關於maven打包部署問題總結(spring boot 可執行jar包常見的問題)

1.打包方式 首先推薦用mvn clean package 打包,最好不要依賴開發工具,可以繞開一些坑,指令行是最穩妥的。 package/install/deploy 三者的區別在於:只打包/打包並佈署到本地maven倉庫/佈署到本地m

原创 常用的數組工具類

最近在用emqtt,程序中用到了一些數組的工具類,抽空整理了一下,歡迎補充!!!1.關於crc16校驗/** * CRC16校驗(校驗完整數組) * * @param buffer 待校驗數組 *

原创 mybatis中<forEach>標籤的使用

你可以傳遞一個 List 實例或者數組作爲參數對象傳給 MyBatis。當你這麼做的時候,MyBatis 會自動將它包裝在一個 Map 中,用名稱作爲鍵。List 實例將會以“list”作爲鍵,而數組實例將會以“array”作爲鍵。for

原创 java.util.zip.ZipException: invalid LOC header (bad signature) 問題解決!!!

本人用的idea 通過SVN檢出公司的項目,但啓動報錯,在網上查閱了大量資料。具體報錯如下 嚴重 [RMI TCP Connection(2)-127.0.0.1] org.apache.catalina.core.ContainerBa

原创 Mybatis-PageHelper的使用

公司使用的PageHelper插件比之前手動寫分頁方便多了,週末自行查資料總結了一下(畢竟國內牛人的開源項目,讀中文文檔要爽太多了),希望對想要快速上手的朋友提供一點幫助。首先上一個小DEMO1.添加Maven依賴<dependency>