原创 Spring Security通過URL模式匹配的聲明式權限控制
Spring Security的聲明式安全授權有兩種方式，一種是以url模式匹配的方式，另一種是方法上使用註解聲明權限，這裏重點說第一種。 一、創建一個類繼承WebSecurityConfigurerAdapter，並使用註解@Enabl
2020-02-22 13:11:50
原创 Spark讀取Hbase中的數據
大家可能都知道很熟悉Spark的兩種常見的數據讀取方式（存放到RDD中）：（1）、調用parallelize函數直接從集合中獲取數據，並存入RDD中；Java版本如下： 1 JavaRDD<Integer>
2018-08-24 13:44:07
2
原创 Windows下安裝部署solr 5.5
注意：本文中的tomcat8所在目錄爲D:\tools\apache-tomcat-8.0.32目錄下 1、官網下載solr-5.5.0.zip解壓到D:\tools\solr-5.5.0目錄 解壓之後的solr-5.5.0文件
2018-08-24 13:44:02
原创 Elasticsearch簡介
基礎概念 Elasticsearch有幾個核心概念。從一開始理解這些概念會對整個學習過程有莫大的幫助。 接近實時（NRT） Elasticsearch是一個接近實時的搜索平臺。這意味着，從索引一個文檔
2018-08-24 13:44:01
原创 Apache Thrift - 可伸縮的跨語言服務開發框架
Apache Thrift 是 Facebook 實現的一種高效的、支持多種編程語言的遠程服務調用的框架。本文將從 Java 開發人員角度詳細介紹 Apache Thrift 的架構、開發和部署，並且針對不同的傳輸協議和服務類型給出相應
2018-08-24 13:44:01
原创 JAVA操作Redis增刪改查
[java] view plain copy package sgh.main.powersite; import java.util.ArrayList; import java.u
2018-08-24 13:44:01
原创 Kafka入門經典教程
問題導讀 1.Kafka獨特設計在什麼地方？ 2.Kafka如何搭建及創建topic、發送消息、消費消息？ 3.如何書寫Kafka程序？ 4.數據傳輸的事務定義有哪三種？ 5.Kafka判斷一個節點是否活着有哪兩個條件？ 6.produ
2018-08-24 13:44:01
原创 大數據-互聯網新的制高點
今天和大夥分享一篇讀書筆記，邁爾-舍恩伯格的《大數據時代》，很棒的書，建議感興趣的人們都可以去讀讀。 在淘寶十週年及阿里巴巴集團前CEO馬雲的卸任晚會上，馬雲說道：“大家還沒搞清PC時代的時候，移動互聯網來了，還沒搞清移動互聯網
2018-08-24 13:44:01
4
原创 Apache Kafka：下一代分佈式消息系統
簡介 Apache Kafka是分佈式發佈-訂閱消息系統。它最初由LinkedIn公司開發，之後成爲Apache項目的一部分。Kafka是一種快速、可擴展的、設計內在就是分佈式的，分區的和可複製的提交日誌服務。 Apache Kaf
2018-08-24 13:44:01
2
原创 Netcat使用方法
netcat被譽爲網絡安全界的‘瑞士軍刀'，相信沒有什麼人不認識它吧...... 一個簡單而有用的工具，透過使用TCP或UDP協議的網絡連接去讀寫數據。它被設計成一個穩定的後門工具，能夠直接由其它程序和腳本輕鬆驅動。同時，它也是一個功
2018-08-24 13:43:55
2
原创 Hadoop Pig學習筆記 各種SQL在PIG中實現
我這裏以Mysql 5.1.x爲例,Pig的版本是0.8 同時我將數據放在了兩個文件,存放在/tmp/data_file_1和/tmp/data_file_2中.文件內容如下: tmp_file_1:
2018-08-24 13:43:55
原创 windows 安裝 zookeeper 並測試
一、序言 以下是我對zookeeper 的一些理解： zookeeper 作爲一個服務註冊信息存儲的管理工具，好吧，這樣說得很抽象，我們舉個“栗子”。 栗子1號： 假設我是一家KT
2018-08-24 13:43:55
3
原创 Hadoop框架結構之 hadoop作業調度詳解
2 MapReduce框架結構 Map/Reduce是一個用於大規模數據處理的分佈式計算模型，它最初是由Google工程師設計並實現的，Google已經將它完整的MapReduce論文公開發布了。其中對它的定義是，Ma
2018-08-24 13:43:55
原创 深入理解Hadoop集羣和網絡
摘要：本文將着重於討論Hadoop集羣的體系結構和方法，及它如何涉及到網絡和服務器基礎設施。開始我們先學習一下Hadoop集羣運作的基礎。 導讀：雲計算和Hadoop中網絡是討論得相對比較少的領域。本文原文由Dell企業技術專家Brad
2018-08-24 13:43:54
2
原创 windows安裝kafka的集羣配置
下載kafka二進制包kafka_2.11-0.9.0.1.tgz，解壓到D:\tools\kafka_2.11-0.9.0.11.拷貝conf/server.properties爲 第一個節點server-3.properties，修
2018-08-24 13:43:54
1