原创 Win10 64位 安裝VirtualBox管理器 通過CentOS 8 虛擬機安裝Linux 8

1、https://www.virtualbox.org/wiki/Downloads  下載  點擊Windows hosts即開始下載   下載完成後是  VirtualBox-6.1.10-138449-Win.exe 文件, 2

原创 XShell 6.0 安裝,Xshell 6.0 鏈接 通過VirtualBox安裝的CentOS 8

申請免費版下載 需要使用個人郵箱申請:https://www.netsarang.com/zh/free-for-home-school/ 1、填寫信息後選擇你需要下載的應用 2、查看郵箱,並點擊鏈接下載(該下載鏈接有效期爲一個月)

原创 Virtual Installer  . Installation failed!Error : 安裝時發生嚴重錯誤

Virtual Installer  . Installation failed!Error : 安裝時發生嚴重錯誤 真刺激,出錯了,好在容易解決 1、打開任務管理器--服務欄 2、開始 Device Install Service 服

原创 1.4 離線分析系統結構概述

任務目的 瞭解離線分析系統的宏觀概念 理解離線分析系統的處理流程 任務清單 任務1:需求分析 任務2:數據處理流程 任務3:項目最終效果 詳細任務步驟 任務1:需求分析 1.案例名稱   XX 網/XX app 點擊流日誌數據挖掘系統  

原创 2.1 Linux系統環境準備

任務目的 熟練安裝 JDK 重點掌握配置 SSH 免密登錄的方法 任務清單 任務1:安裝 JDK 任務2:配置 SSH 免密登錄 任務步驟 任務1:安裝JDK 1. 準備軟件   JDK 的安裝包已經爲大家準備好,在 /root/soft

原创 2.4 Hadoop集羣初體驗

任務目的 掌握啓動 HDFS 集羣和 YARN 集羣的方式 進一步熟悉 HDFS 和 YARN 的 Web UI 界面 熟悉執行 MapReduce 程序的流程 任務清單 任務1:啓動 Hadoop 集羣 任務2:查看進程啓動情況 任務3

原创 2.3 YARN僞分佈式集羣搭建

重點掌握 YARN 集羣的相關配置 學會啓動和關閉 YARN 集羣的兩種方式 能夠使用 jps 命令查看進程的啓動情況 能夠通過 UI 查看 YARN 集羣的運行狀態 任務清單 任務1:YARN 集羣主要配置文件講解 任務2:YARN 集

原创 1.2 Hadoop快速入門

任務目的 重點掌握Hadoop的核心組件 瞭解Hadoop的發展歷史及其生態體系 熟記Hadoop的主要特性 任務清單 任務1:Hadoop簡介 任務2:Hadoop產生背景 任務3:Hadoop特性 任務1:Hadoop簡介   1.

原创 1.3 分佈式系統概述

任務目的 理解集羣、分佈式和負載均衡的概念 理解集羣、分佈式的區別 任務清單 任務1:分佈式集羣 任務2:負載均衡 詳細任務步驟 任務1:分佈式集羣   從開餐館說起:你開了一家餐館,自己掌勺後廚(即做菜)。隨着生意越來越好,發現自己忙不

原创 1.1 大數據概論

  1.1 大數據概論 任務目的 瞭解大數據的概念及其特徵 熟悉大數據的典型應用場景 瞭解大數據部門的業務流程 任務清單 任務1:大數據概念 任務2:大數據特點 任務3:大數據應用場景 任務4:大數據發展前景 任務5:業務流程分析 任務1

原创 2.2 HDFS僞分佈式集羣搭建

任務目的 瞭解 Hadoop 集羣的組成和規劃 重點掌握 HDFS 集羣的相關配置 掌握格式化文件系統的命令 學會啓動和關閉 HDFS 集羣的兩種方式 能夠使用 jps 命令查看進程的啓動情況 能夠通過 UI 查看 HDFS 集羣

原创 2.1 Hive 內嵌模式安裝

任務目的 瞭解 Hive 的三種運行模式 知道 Hive 的官方地址 掌握 Hive 內嵌模式的安裝 任務清單 任務1:Hive 三種運行模式 任務2:Hive 安裝地址 任務3:Hive 內嵌模式安裝 任務步驟 任務1:Hive 三種運

原创 2.2 Hive 本地模式安裝

任務目的 掌握使用 RPM 離線安裝 MySQL 組件的方法 掌握初始化和登錄 MySQL 的命令 掌握 Hive 的安裝部署 掌握 Hive 元數據配置到 MySQL 的步驟 任務清單 任務1:安裝 MySQL 任務2:Hive 安裝部

原创 2.3 Hive 常見屬性配置

任務目的 瞭解 Hive 數據倉庫位置的相關配置信息 掌握在客戶端顯示當前數據庫以及表頭信息的配置步驟 瞭解 Hive 運行日誌相關的配置信息 任務清單 任務1:Hive 數據倉庫位置配置 任務2:查詢後信息顯示配置 任務3:Hive 運

原创 1.2 Hive 架構原理

任務目的 熟記 Hive 內部架構的四個組成部分 瞭解 Hive 和 RDBMS 的區別 任務清單 任務1:Hive 架構原理 任務2:Hive 和 RDBMS 的對比 任務步驟 任務1:Hive 架構原理 圖1   從上圖看出 Hiv