原创 經典論文翻譯導讀之《Google File System》
【譯者預讀】 GFS這三個字母無需過多修飾，《Google File System》的論文也早有譯版。但是這不妨礙我們加點批註、重溫經典，並結合上篇Haystack的文章，將GFS、TFS、Haystack進行一次全方位的對比，一窺各
2020-06-14 13:47:19
4
原创 Spark：大數據的“電光石火”
摘要：Spark是發源於美國加州大學伯克利分校AMPLab的集羣計算平臺。它立足於內存計算，從多迭代批量處理出發，兼收幷蓄數據倉庫、流處理和圖計算等多種計算範式，是罕見的全能選手。 Spark已正式申請加入Apache孵化器，從靈機
2020-02-25 19:45:19
原创 對雲計算中幾種基礎設施（Dynamo,Bigtable,Map/Reduce等）的樸素看法
前言 雲計算的概念近期可謂如火如荼，備受關注。我先前聽到“雲”這個名詞時，很是覺得太過玄乎——也不知道它用在哪裏，更不瞭解它如何實現，總有霧裏看花的感覺！ 好在近期工作需要的緣故，學習和開發過類似於“雲計算”基礎設施的內部系統
2020-02-25 19:45:19
原创 libco協程庫上下文切換原理詳解
[轉自] ： https://blog.csdn.net/lqt641/article/details/732872312017年06月15日 14:31:36閱讀數：2234念橋邊紅藥，年年知爲誰生 —— 楊州慢 姜夔緣起libco
2020-02-25 19:45:19
原创 詳解SSTable結構和LSMTree索引
轉載自：http://www.cnblogs.com/fxjwind/archive/2012/08/14/2638371.html http://www.igvita.com/2012/02/06/sstable-and-log-s
2020-02-25 19:45:19
原创 從Mysql到阿里雲時序數據庫InfluxDB的數據遷移
從Mysql 到 InfluxDB的數據遷移背景本文主要介紹如何使用阿里巴巴的開源工具Datax 實現從 MySQL 到 InfluxDB 的數據遷移。DataX相關使用介紹請參閱 DataX 的 README 文檔。下面將首先介紹 Dat
2019-10-23 17:01:55
11
原创 Golang 新手可能會踩的 N 個坑
原文： https://segmentfault.com/a/1190000013739000#articleHeader9 8. 顯式類型的變量無法使用 nil 來初始化 nil 是 interface、function、point
2019-07-30 09:21:18
原创 架構設計合集
中臺之上（一）：重視業務架構，不要讓“業務的歸業務、技術的歸技術” 在系統裏放一隻“猴子”，阿里瘋了嗎？Netty 和 RPC 框架線程模型分析
2019-02-28 15:24:37
原创 什麼是元數據(Metadata)?
什麼是元數據 任何文件系統中的數據分爲數據和元數據。數據是指普通文件中的實際數據，而元數據指用來描述一個文件的特徵的系統數據，諸如訪問權限、文件擁有者以及文件數據塊的分佈信息(inode...)等等。在集羣文件系統中，分
2019-02-28 15:24:37
原创 Go 初見
Go get download and install packages and dependencies install compile and install packages and depe
2019-02-27 15:27:26
原创 Java Enum 類型
public enum ParseType { JSON("json"), XML("xml"), FILE("file"); private String type; private Par
2019-02-27 15:27:26
原创 數據持久化策略
數據持久化策略 快照 redis在進行數據持久化的過程中，會先將數據寫入到一個臨時文件中，待持久化過程都結束了，纔會用這個臨時文件替換上次持久化好的文件。正是這種特性，讓我們可以隨時來進行備份，因爲快照文件總是完整可用的。 對於RDB方式
2019-02-19 06:48:44
原创 Test
hadoop單機版 https://www.jianshu.com/p/1352ce8c8d73 (Tested) 在hosts文件中進行主機的註冊 什麼也不配，所以配置什麼也不改變，是單機模式。 下載 wget http://a
2019-02-01 15:28:28