原创 HDFS讀寫數據過程解析及編程實現
文章目錄HDFS讀數據HDFS讀數據的簡要過程HDFS讀數據的詳細過程HDFS通信協議HDFS常用的Java API編程實現HDFS寫數據HDFS寫數據的簡要過程HDFS寫數據的詳細過程編程實現HDFS讀寫數據綜合實現 HDFS讀
2020-06-21 22:55:18
原创 HBase的分佈式安裝部署
HBase 分佈式安裝部署小筆記 前言 HBase的使用依賴於Hadoop和zookeeper，在安裝部署HBase之前，要先安裝好Hadoop和zookeeper（如果不安裝zookeeper，HBase也自帶了zookeepe
2020-06-21 22:55:17
原创 Flask之圖書管理小案例
案例運行結果 代碼運行後，瀏覽器地址欄輸入：127.0.0.1:4442即可訪問此web應用小程序 數據庫這邊也實現了同步更新數據 敲碼前的絮絮叨叨 項目目錄結構如下 本小demo向頁面的表單提交作者、書籍信息到數據庫中；
2020-06-21 22:55:15
原创 小坨的句子庫
前言：總有一些句子，教人健壯，這篇博文僅爲記錄。 社會上之習慣，殺許多之善人。文學上之習慣，殺許多之天才。——王國維《人間詞話》 願你有充分的忍耐去擔當，有充分單純的心去信仰。——里爾克 欲做精金美玉的人品，定從烈
2020-06-21 22:55:15
原创 機器學習之電子商務網站用戶行爲分析及服務推薦案例
項目概述 本項目案例根據某法律諮詢服務網站的用戶瀏覽記錄，把用戶劃分爲訓練集的用戶和測試集的用戶，再根據找出相應用戶的瀏覽記錄劃分爲訓練集數據和測試集數據。訓練集用於後續構建用戶物品矩陣，再根據用戶物品矩陣構建物品相似度矩陣（根據
2020-06-21 22:55:13
1
原创 Spark分佈式集羣環境搭建小筆記
文章目錄寫在前面搭建好Hadoop集羣環境安裝Spark（Master節點上操作）配置環境變量（Master節點上操作）Spark配置（Master節點上操作）配置Worker節點啓動Spark集羣（在Master節點上操作）關閉
2020-06-21 22:55:13
原创 Java操作HBase的編程實例
文章目錄HBase常用的Java APIorg.apache.hadoop.hbase.HBaseConfigurationorg.apache.hadoop.hbase.client.Adminorg.apache.hadoop
2020-06-11 10:38:10
原创 小坨的Hive筆記
文章目錄什麼是HiveHive的優點Hive的缺點Hive架構Hive和數據庫比較Hive的安裝部署Hive的常用操作將本地文件導入Hive案例HiveJDBC訪問Hive常用交互命令Hive其他命令操作Hive常見屬性配置Hiv
2020-06-09 00:13:48
原创 小坨的Flask筆記
什麼是Flask 在講什麼是Flask之前，我們先了解一下什麼是Web Application Framework，Web Application Framework（Web應用程序框架）表示一個庫和模塊的集合，使Web應用程序開
2020-06-09 00:13:48
原创 小坨的Flask之圖書管理小案例
案例運行結果 代碼運行後，瀏覽器地址欄輸入：127.0.0.1:4442即可訪問此web應用小程序 數據庫這邊也實現了同步更新數據 敲碼前的絮絮叨叨 項目目錄結構如下 本小demo向頁面的表單提交作者、書籍信息到數據庫中；
2020-06-09 00:13:48
原创 sqoop安裝及其使用
文章目錄sqoop簡介sqoop安裝sqoop使用把MySQL中的數據導入到HDFS上將MySQL上的數據導出到數據庫中把MySQL上的數據導入到Hive中把Hive上的數據導出到MySQL中記些bug sqoop簡介 sqoop
2020-06-09 00:13:48
原创 小坨的Solr筆記
文章目錄什麼是SolrSolr的索引和搜索流程Solr界面Solr Core的子面板功能schema.xml配置文件詳解實現MySQL數據庫數據導入到solr索引庫配置solrconfig.xml創建並配置data-config.
2020-05-22 00:43:06
原创 Apache Solr 4.9上配置IKAnalyzer中文分詞插件
文章目錄solr的介紹及其安裝下載IKAnalyzer安裝並配置IKAnalyzer記兩個bug solr的介紹及其安裝 一句話概括：solr是基於Lucene的Java搜索引擎服務器，其部署要搭配tomcat Solr的介紹及其
2020-05-16 11:14:44
原创 Flume入門案例小筆記
Flume監控端口數據小案例 案例目的 使用 Flume 監聽一個端口，收集該端口數據，並打印到控制檯。 實現步驟 安裝netcat工具，netcat所做的就是在兩臺電腦之間建立鏈接並返回兩個數據流，具體用法可見：Linux Ne
2020-05-13 20:48:35
原创 小坨的HBase分佈式安裝部署小筆記
文章目錄前言下載HBase解壓並安裝HBase配置HBase環境變量HBase配置把配置好的HBase目錄分發到Slave1開啓HBase 前言 在安裝部署HBase之前，請先安裝好Hadoop和zookeeper，Hadoop和
2020-05-07 09:26:57