原创 Mybatis Example 使用方法

原文鏈接:https://www.jianshu.com/p/d022fbbc3f8c 一、mapper接口中的方法 int countByExample(UserExample exa

原创 Spark Sql用戶權限異常記錄

使用SparkSql存Hive數據報錯如下 19/09/11 14:53:10 ERROR metadata.Hive: MetaException(message:User appuser does not have privi

原创 Kudu異常總結

原文鏈接:https://cloud.tencent.com/developer/article/1491105 1、impala不支持kudu表的關鍵字:PARTITIONED - L

原创 深究|Elasticsearch單字段支持的最大字符數?

原文鏈接:https://blog.csdn.net/laoyang360/article/details/78207980 在業務系統中,遇到過兩個問題: 問題1:設置爲keyword

原创 Hive基於Hbase的外部表使用

官網:https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration 作用 Hive直接使用Hbase的數據,不過hbase一般不適合分析數據,一般使用外部表將h

原创 Java日誌框架使用注意點

一、應用中不可直接使用日誌系統(Log4j、Logback)中的API,而應依賴使用日誌框架SLF4J中的API,使用門面模式的日誌框架,有利於維護和各個類的日誌處理方式統一。 import org.slf4j.Logger; i

原创 Spark讀取--files文件

1.讀取代碼 Properties properties = new Properties(); properties.load(new FileInputStream("/etc/hive/conf/test.propertie

原创 IDEA maven provided依賴報錯解決

問題 maven添加provided依賴,idea運行時會報錯找不到相關類 解決 在Run|Run Configurations選擇如下勾選框 Include dependencies with “Provided” scope

原创 hue file browser配置httpfs

配置 1.在HDFS——實例——添加角色實例——選擇httpFs主機 2.在實例頁面啓動httpFs服務 3.在HUE——配置webhdfs_url選擇一個httpfs節點 4.重啓HUE httpfs和webhdfs兩種服