原创 wget下載jdk最新方式

wget --no-check-certificate --no-cookies --header "Cookie: oraclelicense=accept-securebackup-cookie" http://download.or

原创 innodb 存儲佈局

Data Organization in InnoDB By annamalai.gurusami on Apr 19, 2013 Introduction This article will explain how the data

原创 mapreduce論文筆記

Map/reduce論文   即輸入key/value和輸出key/value不在同一個domain,而中間輸出key/value和結果key/value在同一個domain。     框架將輸入數據自動分割成M個split,在多個

原创 bigtable論文筆記

Bigtable不支持完整的關係數據模型;與之相反,Bigtable爲客戶提供了簡單的數據模型,利用這個模型,客戶可以動態控制數據的layout和format。數據通過行和列的名字訪問,名字可以是任意的字符串。Bigtable將存儲的數據

原创 gfs論文筆記

GFS論文: Design Assumptions: Failure detection, recovery 對大文件multi-gb優化 Large streaming read。(支持small random read但不是主要場景)

原创 hbase組合rowkey和partial key scan

partial key scan並沒有反應其特點,應該叫prefix key scan更好些,也就是說必須作爲前綴纔有意義,若是中間的key,就不行了。 比如rowkey形式爲<key1>-<key2>-<key3> 以key2或key3

原创 eclipse uml類圖插件

http://stackoverflow.com/questions/6302490/eclipse-plugin-for-generating-a-class-diagram ObjectAid. My current prefe

原创 jmx爲啥開了額外兩個隨機端口?

通常配置的是registry port: -Dcom.sun.management.jmxremote.port=9123 jdk7之後rmi server port也可以配置了,可以配置成同一個。 -Dcom.sun.managem

原创 pytorch中獲取模型input/output shape

Pytorch官方目前無法像tensorflow, caffe那樣直接給出shape信息,詳見 https://github.com/pytorch/pytorch/pull/3043 以下代碼算一種workaround。由於CNN,

原创 spanner論文zt

Spanner的意義到底是什麼? 關於替代MySQL,論文是如此描述的: MySQL的數據分片機制,會把每個客戶和所有相關的數據分配給一個固定的分區。這種佈局方式,可以支持針對單個客戶的索引構建和複雜查詢處理,但是,需要了解一些商業知

原创 阿里DRC介紹 zt

京東的也出來了,明顯的阿里痕跡 Jingobus。呵呵沒準也是canal/otter派生出來的。 http://server.it168.com/a2015/1109/1775/000001775824.shtml ---------

原创 阿里和微博的異地多活方案zt

問題:SNS型不適合單元化? 總結: 多活基本思路: 每個中心都是活的,可以實時承擔流量,任何一點出問題,都可以直接切掉,由另外一點直接接管,非傳統的兩地三中心冷備方式。挑戰及解決方法: 服務延時。 讓操作全部在同一中心內完成,單元化

原创 LSTM詳解及tensorflow API num_hidden的確切含義

RNN/LSTM比CNN難理解,LSTM介紹最有名的當屬colah http://colah.github.io/posts/2015-08-Understanding-LSTMs/這篇及其各種中文版。 但是。。。。。。。。。。。。。。。

原创 從 0 到 1:微信後臺系統的演進之路zt

------------------ 微信起初定位是一個通訊工具,作爲通訊工具最核心的功能是收發消息。微信團隊源於廣硏團隊,消息模型跟郵箱的郵件模型也很有淵源,都是存儲轉發。 圖 1 展示了這一消息模型,消息被髮出後,會先在後臺

原创 關於面試

http://www.quora.com/What-should-one-say-when-the-interviewer-asks-Do-you-have-any-questions-for-me/answer/Edmond-Lau?s