我們和業內一些知名公司實踐驗證的方案:
架構:HDFS + HBASE 比較容易做到P級。對於提供雲存儲服務的單位,訪問上可以考慮前端再做熱點緩存(SSD+服務化)。
軟件選型:Cloudera CDH4
技術要求:高
另外可以考慮:GlusterFS + Cassandra:技術要求高。
靈活集羣: FastDFS直接封裝服務可以做到數百T,合理架設優化可以做到P級。文件大小不超過500M(概數)。技術要求較低。
混合集羣:多種存儲服務整合,上層使用統一服務,上層服務負責路由等工作。技術要求:很高。
更多系統信息,參見我在Qcon的演講:
http://www.infoq.com/cn/presentations/jingdong-cloud-storage-services-applications-explore
ppt已經上傳: http://download.csdn.net/detail/doliu6/6439741(可以做到比較大的中型)