原创 HBase性能調優配置總結

一、HRegion 1.修改HRegion大小 hbase.hregion.max.filesize 默認:10737418240(10G) 單位是:KB 說明:如果超出限制值,HRegion會進行splict操作,舊的HRegio

原创 [HBase事故] HBase regionserver被強制關閉問題分析

[HBase命案系列] HBase regionserver被強制關閉問題分析 一.案發現場 2018-09-06 15:51:59,685 ERROR [regionserver/node-210:16020.logRoller] re

原创 HDFS-遇到問題解決總結

問題:因爲ambari重啓HDFS有某個節點失敗導致,後續創建目錄報錯 根本原因:name node處於safe mode Caused by: java.lang.RuntimeException: org.apache.hadoop.

原创 k8s-基本命令

k8s基本命令 問題:常用的命令有哪些?有什麼用?怎麼用? 解答 kubectl edit k8s修改資源設置 po kubectl edit po <your_poName> svc kubectl edit svc <svc_name

原创 深度學習-note-RNN(循環神經網絡)

(本文爲本人學習工作總結,如有雷同,不勝榮幸。可聯繫本人立即修改或者刪除) RNN(循環網絡) 問題:什麼是RNN?RNN有什麼應用?怎麼用? 解答: RNN 概念 循環卷積網絡(RNN,Recurrent Neural Networks

原创 conda install更新速度解決

(本文爲本人學習工作總結,如有雷同,不勝榮幸。可聯繫本人立即修改或者刪除) conda install更新速度慢 問題:更新tensorflow速度慢怎麼辦? 解決: 在已按照conda機器上配置國內鏡像站 conda config --

原创 docker 容器後臺運行

容器後臺運行 問題 想要後臺啓動容器進行調試 方案一 docker run -d <image_name> tail -f /dev/null 方案二 docker run -i -t <image_name> [command] 然後C

原创 Docker-note 從入門到

docker docker docker概念 組成 架構 生態 docker命令 docker 網絡略 實戰 安裝 docker 命令 查看 run exec 開啓交互模式 ps查看正在運行的容器 -a包括停止的容器 cp拷貝 s

原创 git基本使用

Git基本使用 問題:git是什麼?有什麼用?怎麼用? 解答 解析 git是分佈式版本控制系統 應用 用於代碼管理,多人團隊協助 使用 0.安裝 #centos默認已安裝 yum -y install git 1.安裝後初始配置 #配置全

原创 Shell腳本

Shell腳本 Shell腳本 簡介 變量 1變量命名 2環境變量 3局部變量 4位置變量 5特殊變量 單引號雙引號反引號esc下面的鍵 for 條件測試 whileuntil循環 if判斷 case判斷 自定義函數一般不在函數裏

原创 JAVA-多線程-思維導圖

JAVA-多線程-思維導圖

原创 SparkML-note-PCA

(本文爲本人學習工作總結,如有雷同,不勝榮幸。可聯繫本人立即修改或者刪除) spark ML機器學習 問題:什麼是主成分分析(PCA)? 解答: ps:使用的是ML不是MLib,區別是ML更加的抽象,使用的DataSet(Datafram

原创 kubernetes(K8s)-概念-基本組件

K8s-概念-基本組件 問題:k8s基本組件有哪些?有什麼用?怎麼用? 解答:常用組件配置 Replication Controller deployment(deploy) nodeSelector republicate se

原创 yum 簡單運用

yum 簡單運用 查 1.查看有哪些安裝的包 yum list 2.查看安裝的特定包 yum search <package_name> yum list installed|grep <package_name> 刪 1.刪除指定的包

原创 Docker-note-實現原理

2.Docker實現原理 問題:docker內部是使用什麼實現的? 解答: cgroups(Control Groups) Cgroups對內存、CPU限制 blkio 塊設備讀寫限制 cpu CPU調度器限制 cpuset CPU訪問控