原创 HDFS2.0 HA實現

Active NameNode 和 Standby NameNode:兩臺 NameNode 形成互備,一臺處於 Active 狀態,爲主 NameNode,另外一臺處於 Standby 狀態,爲備 NameNode,只有主 N

原创 Java之下載相關網頁到本地

題目:通過URL/UrlConnetion編程,將百度首頁下載到本地,存儲文件baidu.txt中 代碼實現 package com.czk.test.io; import java.io.BufferedInputStre

原创 Linux 不同壓縮格式 的不同解壓命令

不同壓縮格式的文件對應的解壓命令: *.tar 用 tar –xvf 解壓 *.gz 用 gzip -d或者gunzip 解壓 .tar.gz和.tgz 用 tar –xzf 解壓 .tar.gz和.tgz 用 tar –xzf

原创 Java常用包總結

一、Java 常用包 java.lang--語言包:Java語言的基礎類,包括Object類、Thread類、String、Math、System、Runtime、Class、Exception、Process等,是Java的

原创 Java操作redis (jedis)

Java操作redis Java操作redis的第三方庫位jedis maven pom配置:加入jedis相應版本依賴 百度 jedis maven 即可找到 測試redis server是否正常開啓 packag

原创 Java正則表達式大全(常用)

一、校驗數字的表達式 1 數字:^[0-9]*$ 2 n位的數字:^\d{n}$ 3 至少n位的數字:^\d{n,}$ 4 m-n位的數字:^\d{m,n}$ 5 零和非零開頭的數字:^(0|[1-9][0-9]*

原创 關於redis持久化的介紹

redis持久化重要說明 redis數據存儲模式只有兩種 cache-only 只做爲“緩存”服務,數據均在內存中,不持久化數據,服務停掉則數據全部丟失,且無恢復方法,高速但安全性低; persistence 數據不只是在

原创 spark core 介紹

Spark Core 1、Spark架構設計 1.1 架構設計圖 1.2 相關術語名詞解釋 RDD (Resilient Distributed DataSet) 彈性分佈式數據集,是對數據集在spark存儲和計算過程中

原创 Eclipse自動導入相應包的類名的快捷鍵

在Eclipse裏,寫一個沒有導入相應包的類名(這個類名已經完全寫全,比如LayoutManager), 可以用ctrl+shift+M/Ctrl+Shift+o/Ctrl+1導入相應的包. 有人說用Ctrl+Shift

原创 hbase的簡單介紹

1、歷史背景 產生原因 內因 hadoop之mapreduce/hdfs/hive等適合做批量數據處理,且只能以順序方式訪問數據。 外因 現實開發應用場景中,經常需要海量數據場景下的實時數據隨機訪問的需求,hadoop作爲大

原创 spark RDD常用操作

Spark常用算子分析與應用 1、算子概述 什麼是算子 英文翻譯爲:Operator(簡稱op) 狹義:指從一個函數空間到另一個函數空間(或它自身)的映射。 廣義:指從一個空間到另一個空間的映射 通俗理解:指事物(數據或函數)從一個狀態

原创 hbase架構設計

目錄        1、架構設計        2、核心概念釋義        3、hbase寫流程        4、hbase讀流程   1、架構設計 架構設計圖                               

原创 eclipse maven項目 【Missing artifact jdk.tools:jdk.tools:jar:1.7】解決方法

問題: pom.xml總是提示 Missing artifact jdk.tools:jdk.tools:jar:1.7 原因: 工程maven找不到系統內的jdk1.7,根本原因是沒有指定javaw.exe的的位置導致的 解決方

原创 Base64編碼 去掉 換行符 方法

問題: Base64編碼後出現了換行符,導致無法解碼,解碼時提示RuntimeError 原因: 根據RFC822規定,BASE64Encoder編碼每76個字符,會加上一個回車換行 解決方案: 用Apache的 commons-

原创 Java之常用三大排序(冒泡排序,簡單選擇排序,快速排序)

題目: 給定一個一維整型數組,自己實現冒泡排序、簡單選擇排序、快速排序完成對其的升序排列並輸出? 答案 冒泡排序按降序排列 public class TestBubbleSort { public static