原创 【問題記錄】永久解決Java版本不一致導致的問題

問題描述: Java版本不兼容導致的問題 解決辦法: 在maven的settings文件的profiles版塊下加入如下代碼 <profile> <id>jdk18</id> <activation>

原创 【Linux】手把手教你裝VMWare15.5和Linux CentOS 7

文章目錄1. VMWare安裝(1) 雙擊運行安裝包程序(2) 接受許可證協議(關鍵不接受不讓裝啊………)(3) 選擇安裝位置(4) 不勾選產品更新和客戶體驗提升計劃(5)選擇是否創建快捷方式(6) 開始安裝……(7)

原创 【HBase】爲什麼不把META表信息直接保存在ZK中?每次訪問都需要請求meta表位置麼?

主要是爲了保存的數據量考慮,ZK中不宜保存大量數據,而META表主要是保存Region和RegionServer的映射信息,Region的數量沒有具體約束,只要在內存允許的範圍內,Region數量可以有很多,如果保存在ZK中,Z

原创 【Linux】一行命令使集羣時間與網絡同步

很多框架會因爲節點之間的連接時間超時出現各種問題,這時只需要通過 sudo ntpdate 0.cn.pool.ntp.org 命令使各個節點的時間跟網絡時間同步即可。

原创 【HBase】運行時ERROR:org.apache.hadoop.hbase.PleaseHoldException:Master is initializing的解決方法

問題描述: ERROR:org.apache.hadoop.hbase.PleaseHoldException:Master is initializing 原因分析: 初始化HBase後,修改過系統時間或者多臺節點的時間不

原创 大數據集羣常用框架通信端口號彙總

  常見端口彙總: Hadoop:         50070:HDFS WEB UI端口     8020 : 高可用的HDFS RPC端口     9000 : 非高可用的HDFS RPC端口     8088 : Yar

原创 【Java】String、StringBuffer以及StringBuilder的區別?

String、StringBuffer以及StringBuilder的區別? 既然在Java中已經存在了String類,那爲什麼還需要StringBuilder和StringBuffer類呢?一起來看下面的代碼 pub

原创 【Java】遍歷一維數組的三種方式總結

打印數組所有元素方式一: for (int i = 0; i < names.length; i++) { System.out.println(names[i]);// 打印下標0——names.length-1的數組元素 }

原创 【Java】學了這麼久Java,你真的理解父子類的含義嗎? 你會調用Java中的clone方法嗎?protected關鍵字你真的敢用嗎?

如代碼第23行,User05 的對象user,爲什麼不能直接調用Object類中受保護的clone()方法呢? package com.atguigu.bigdata.java.chapter06;; /** * @aut

原创 【Azkaban】記錄一個問題:Azkaban Execute Flow一直PREPARING狀態

問題描述: web服務端啓動閃退或者後面 Execute Flow一直處於PREPARING狀態 查看日誌後發現連接執行器時全部被拒 原因分析: 可能原因一:內存問題: 過濾器會檢查 executor 主機空餘內存是否會大於

原创 【Kafka】Kafka基於磁盤卻這麼快的原因在哪?

首先,Kafka 作爲一個消息系統,通過 topic 的方式來管理 message,把這些消息都順序寫入磁盤文件來提高寫入速度,其實這些消息並沒有實時寫入磁盤,而是充分利用了現代操作系統分頁存儲來利用內存提高IO效率。 其次,它

原创 【MySQL】學習筆記之MySQL基礎總結

點擊筆記原文目錄可快速查看指定內容 點擊鏈接:最新筆記原文(同步) 文章目錄> 數據庫概述-- 數據庫的特點和好處-- 數據庫軟件> DML——數據查詢-- 基本查詢-- 條件查詢--- between……and關鍵字---

原创 【其他】紀念曾經手寫彙編程序題的快樂時光

如今框架層出不窮,今天無意間翻到大學手寫過的彙編語言,感慨萬千。

原创 【Java】記錄一個問題:Error:java: Compilation failed: internal java compiler error

問題描述: Error:java: Compilation failed: internal java compiler error IDEA裏面改了版本還是不行 原因分析: maven的編譯版本問題 解決方法:

原创 【Hive】設置Hive計算引擎(臨時修改)

set hive.execution.engine=mr; set hive.execution.engine=spark; set hive.execution.engine=tez;