基于Erlang的反向代理集群的設(shè)計與實現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)的高速發(fā)展,用戶訪問量越來越大,單個Web服務(wù)器非常容易成為性能瓶頸。通過使用反向代理服務(wù)器組建服務(wù)器集群可以提高系統(tǒng)的性能,但是隨著Web服務(wù)器的增多,單個反向代理服務(wù)器可能又成為新的瓶頸,所以需要組建反向代理服務(wù)器集群來解決這個問題。但是目前大多數(shù)的反向代理服務(wù)器組建集群時都是獨立工作,無法共享調(diào)度信息和緩存信息,影響了集群的性能。
　　 本文首先研究了代理服務(wù)器相關(guān)背景技術(shù),分析了超文本傳輸協(xié)議、Web緩存技術(shù)和

2、服務(wù)器集群技術(shù)。然后介紹了Erlang語言和OTP系統(tǒng),并基于Erlang/OTP提出一個用來構(gòu)建高并發(fā)、高可用、合作式的反向代理服務(wù)器集群的EDRP(ErlangDistributed Reverse Proxy)系統(tǒng)。本文將詳細介紹EDRP系統(tǒng)的設(shè)計與實現(xiàn)。
　　 EDRP系統(tǒng)主要由反向代理、負載調(diào)度、緩存管理三個模塊組成。反向代理模塊利用Erlang語言的超輕量級進程實現(xiàn)了一個基于閾值動態(tài)調(diào)整的進程池,從而能夠處理高并發(fā)的

3、用戶連接。并且為了方便能夠在處理請求和響應(yīng)時進行擴展,還設(shè)計了模塊化的過濾機制,可以通過添加緩存過濾器、安全過濾器來實現(xiàn)緩存管理和安全控制的功能,提高了系統(tǒng)的靈活性。
　　 然后,本文在分析和比較各種負載調(diào)度模型的優(yōu)缺點之后,基于在所有代理服務(wù)器之間都共享調(diào)度信息的考慮,實現(xiàn)了合作式負載調(diào)度模型,并采用了集中式和分布式相結(jié)合的管理方式。集群中有一個主調(diào)度進程負責進行調(diào)度工作,其它的調(diào)度進程都是它的備份,這樣既可以減少調(diào)度請求時的

4、開銷又可以避免單點故障的問題。負載調(diào)度模塊中還實現(xiàn)了多種負載調(diào)度算法,可以滿足各種不同的需求,并且還實現(xiàn)了負載調(diào)度算法的熱切換機制,可以在運行時對負載調(diào)度算法進行動態(tài)切換。
　　 為了提高緩存副本的查找速度同時又不影響整個集群的可靠性,緩存管理模塊采用了集中式管理和分布式管理相結(jié)合的單層式緩存體系結(jié)構(gòu),代理服務(wù)器之間可以共享緩存。緩存管理模塊還實現(xiàn)了基于動態(tài)閾值自適應(yīng)TTL機制和LRU-threshold策略分別來保證緩存的弱一