原创 基於HA高可用搭建-Hadoop-3.2.1實戰搭建之Hbase-2.2.5集羣部署

版本選擇:Hadoop-3.2.1/Hbase-2.2.5 一、Zookeeper正常部署 [deploy@hadoop102 module]$ zk.sh start 二、Hadoop正常部署 [deploy@hadoop102

原创 基於HA高可用搭建Hadoop-3.2.1實戰搭建之ES-7.7.1+Kibana-7.7.1集羣部署

一、安裝環境 操作系統  CentOS8 elasticsearch-7.7.1 kibana-7.7.1 機器:hadoop102、hadoop103、hadoop104、hadoop105、hadoop106 二、安裝elastics

原创 MySQL 去除字段中的換行char(10)和回車符char(13)

問題描述: 我們導出數據到excel的時候,會無緣無故換行,導致數據格式混亂,這樣的問題一般都是我們的數據中有隱藏的換行符,回車符導致的,所以再導出前我們要將這樣的字符替換掉 注意引號都是英文引號 環境: RHEL5+MySQL UPD

原创 DB2中NULL,COUNT,NOT IN,NOT EXISTS的區別

TB1_1   TB1_2  下列執行結果分別爲: SELECT COUNT(COL_1) FROM TB1_1   SELECT COUNT(DISTINCT COL_1) FROM TB1_1   SELECT AVG(COL_1)

原创 Mysql實現數據庫row_number()的寫法

以下是固定的寫法,實現其他邏輯按這個套路寫就好,將字段替換成你想分組查詢的字段即可 rank跟row_number()一樣,過濾分組排序後的數據 SELECT id, name, create_time, rank FROM (     

原创 Kettle在Linux週期調度的實現

Kettle作業調度引擎:kitchen.sh 一、JOB調度shell腳本 #!/bin/bash cat<<EOFSHELL *****************************************************

原创 Hive Beeline窗體函數使用

hive 窗口分析函數 0: jdbc:hive2://localhost:10000> select * from t_access; +----------------+------------------------------

原创 HIVE日期函數總結

select day -- 時

原创 django模型中auto_now與auto_now_add的區別

auto_now auto_now無論是你添加還是修改對象,時間爲你添加或者修改的時間,一般用作更新時間。 auto_now_add auto_now_add爲添加時的時間,更新對象時不會有變動,一般用作創建時間。 具體案例: clas

原创 電商基本術語B2B C2C B2C C2B O2O F2C B2B2C

B2B--企業對企業:案例:阿里巴巴、慧聰網 C2C--個人對個人:案例:淘寶、易趣、瓜子二手車 B2C--企業對個人:案例:唯品會、樂蜂網 C2B--個人對企業:案例:海爾商城、 尚品宅配 O2O--線上到線下:案例:美團、餓了嗎 F2

原创 SKU與SPU概念

SPU = Standard Product Unit (標準產品單位) SPU 是商品信息聚合的最小單位,是一組可複用、易檢索的標準化信息的集合,該集合描述 了一個產品的特性。 通俗點講,屬性值、特性相同的商品就可以稱爲一個 SPU。 

原创 Sqoop實戰案例總結

安裝注意事項 #Set path to where bin/hadoop is available export HADOOP_COMMON_HOME=/app/bigdata/hadoop #Set path to where ha

原创 ubuntu 卸載python3.5

1.卸載python3.5 sudo apt-get remove python3.5 2.卸載python3.5以及它的依賴包 sudo apt-get remove --auto-remove python3.5 3.清除py

原创 Hive之UDF實現

Java實現UDF函數 一、實現字符串到數字的轉換 package com.easyrong.data.function; import org.apache.hadoop.hive.ql.exec.UDF; public cla