網站的分佈式架構

互聯網的網站和大部分企業管理軟件一樣都是使用B/S架構模型,但是大型的公共網站B/S架構會更加複雜,對架構人員的要求更高,今天我想在自己博客裏聊聊我設計的網站的B/S技術架構。

不管是B/S架構的企業管理系統還是網站技術架構可以抽象爲如下簡圖:

在傳統B/S架構的企業管理系統裏,技術架構往往就是一個工程項目,各個邏輯分層都是該工程的業務邏輯模塊。但是作爲提供公共服務的網站,由於用戶 羣比較龐大,網站併發量高,需求變化大,變更頻繁以及網站出於對安全的考慮,以上的邏輯分層在技術架構上的實現也就會複雜的多。本人前不久做一個網站,我 設計的技術架構簡圖如下:

我把網站項目拆分爲三個子項目:前端項目、服務端項目和memcache項目,前端項目包含頁面、靜態資源和控制層;服務端項目包含業務層和數據庫操作層;memcache項目緩存前端項目和服務端項目公用的數據。

在系統部署上,前端項目和服務端項目都採用分佈式方式(我們的網站前端是4臺服務器,服務端是4臺服務器),用戶請求進入前先通過負載均衡設備進行 請求分發,前端和服務端之間以及服務端和數據庫之間有防火牆保證系統的安全性,前端的集羣和服務端集羣分屬到不同網絡環境裏,前端集羣可以訪問外網,服務 端集羣和數據庫所在網絡不能直接訪問外網,但是前端網絡環境和服務端網絡環境之間可以進行通信。

服務端和客戶端用我們自定義的報文進行通訊,傳輸協議時http,由於本人所在的網站安全性要求比較高,用戶傳輸的請求協議使用https。

爲了保證服務端和客戶端通訊的效率,客戶端和服務端通訊我們使用長連接(我們網站服務端語言選擇的是java,通訊層使用netty框架開發的), 爲了保證長連接,我們寫了一個心跳檢測服務,該服務在後臺線程裏運行,每個5分鐘檢測一次心跳,當然檢測的間隔時間是可以配置的。此外,我們事先估計過網 站的最大併發量,在網站啓動時候,我們構建了一個線程池(我們使用的服務器是8核處理器,每核最大線程數256,所以我們線程池裏總共的最大線程總數數是 8*256*4=8196),每個線程處理一個用戶的請求。

由於客戶端項目採取分佈式部署,因此存在session共享的問題,我們網站的session共享沒有使用web容器自帶的session共享機 制,而是我們自己研發了一套session機制,原理很簡單,具體是我們會對每個用戶會話生成一個唯一標示,我們的唯一標示是這麼設計:當前用戶的 session的id值+隨機16位數字和字母組合+當前的納秒值,然後將該值哈希算出一個key,原有保存在session裏的值保存在 memcache集羣裏,這些數據的key就是我們算出的用戶唯一標示。最終我們網站前端不在使用session對象,而是我們自己設計的session 機制,對此我們還封裝了一套自定義標籤,在頁面上操作我們自定義的session。

服務端也有類似的共享機制,但是有所不同,當客戶端請求服務端時候,請求會具體落到服務端的某一臺服務器,因爲本網站有些請求處理時異步的,也就是 說客戶某些請求不是立即返回給用戶,而是現將請求分發給服務端,此時客戶端會返回用戶一個相應標示,說明該請求已經被受理,正在處理中,而服務端的某個線 程此時已經開始處理了該請求,客戶端按一定時間間隔發送請求給服務端,問詢請求是否處理完成,但是服務端也是分佈式,請求時隨機發送,客戶端的問詢可能會 分發到別的服務器,因此這樣的請求,我會在客戶端記錄下處理的服務端ip地址和線程id,在問詢的時候就會訪問指定好的服務器和線程,直到請求處理完畢, 最後關閉詢問,將結果返回給用戶。

由於我們把一個網站項目拆分成了三個獨立項目,因此在項目管理和協調上增加了難度,所以我們引入maven框架對工程進行了管理和構建,同時構建一個common工程,專門負責服務端和前端公共程序的開發。

本框架將展示層和業務處理層徹底分開,因此客戶端工程師可以專心做客戶端,服務端工程師專心做服務端,大家只要學習如何封裝通訊協議就行,因此很利於項目組人員的橫向擴展。

以上就是本人爲公司網站設計的技術架構,這裏和大夥分享下,不知道好不好,希望各位大牛能給點建設性的意見。


以上內容來自: http://www.alibuybuy.com/posts/81675.html

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章