高并發(fā)糧情測控系統(tǒng)Web服務(wù)端的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、糧食安全問題一直是與人們息息相關(guān)的問題。隨著4G網(wǎng)絡(luò)的普及、云計(jì)算技術(shù)興起，糧情測控的有網(wǎng)頁客戶端、電腦客戶端和安卓客戶端。隨著用戶數(shù)量的不斷增加，在面對大量用戶訪問、高并發(fā)請求時，系統(tǒng)容易出現(xiàn)用戶等待時間長、請求失敗、頁面跳轉(zhuǎn)失敗、和數(shù)據(jù)出錯等情況，給用戶帶來了極大的不便，因此需要提高系統(tǒng)并發(fā)性能。為了提高系統(tǒng)的并發(fā)性能，在硬件方面，大型網(wǎng)站通過對服務(wù)器進(jìn)行性能提高和擴(kuò)大服務(wù)器集群規(guī)模來達(dá)到穩(wěn)定運(yùn)行系統(tǒng)的目的。在系統(tǒng)的內(nèi)部性能來應(yīng)對高

2、并發(fā)。在HTTP服務(wù)器方面，使用靜態(tài)服務(wù)器分離、負(fù)載均衡等技術(shù)方法。在數(shù)據(jù)庫性能方面，有數(shù)據(jù)庫集群、庫表散列等方法。在緩存方面通過緩存和數(shù)據(jù)庫結(jié)合的方式來減輕對數(shù)據(jù)庫的讀寫請求壓力?，F(xiàn)有的糧情測控系統(tǒng)對數(shù)據(jù)庫進(jìn)行操作時，使用多線程連接池模式和C++自帶deque來處理并發(fā)請求，不僅CPU利用率不高、占用大量服務(wù)器資源，而且隊(duì)列等待時間長。針對項(xiàng)目現(xiàn)狀和只使用現(xiàn)有硬件資源的情況下，本文對提高系統(tǒng)Web服務(wù)端的并發(fā)性能，開展了以下研究工作:

3、
　　(1)通過對Node技術(shù)的深入研究，分析其單線程、非阻塞I/O和事件驅(qū)動機(jī)制的技術(shù)特點(diǎn)。單線程節(jié)省服務(wù)器內(nèi)存，實(shí)現(xiàn)宏觀并發(fā)，且操作系統(tǒng)沒有線程創(chuàng)建和銷毀的時間開銷。非阻塞I/O的核心利用率非常高。Node的底層代碼近半數(shù)都用于事件隊(duì)列、回調(diào)函數(shù)（有優(yōu)先級）隊(duì)列的構(gòu)建。用事件驅(qū)動機(jī)制可以完成服務(wù)器的任務(wù)調(diào)度。
　　(2)利用Node對CPU充分利用的優(yōu)勢，將單核單線程N(yùn)ode引申到多核CPU環(huán)境下。通過對以往實(shí)現(xiàn)Node

4、多核技術(shù)的研究，分析其負(fù)載不均衡和實(shí)現(xiàn)冗余等劣勢，結(jié)合反向代理服務(wù)器成熟的均衡算法的優(yōu)勢和通信劣勢，設(shè)計(jì)了一種新的多核解決方案:使用Node服務(wù)器作為反向代理來減小工作中通信負(fù)擔(dān)的問題、保障負(fù)載均衡。該方案不僅可以充分利用Node在高并發(fā)時的性能優(yōu)勢，提高程序執(zhí)行效率，最重要的是，可以在保障負(fù)載均衡的前提下提高對多核CPU資源的利用率。
　　(3)為了提高糧情測控系統(tǒng)的并發(fā)性能，本文采用Node技術(shù)設(shè)計(jì)了一個適合糧情測控系統(tǒng)的高并

5、發(fā)Web服務(wù)端總體架構(gòu)，針對功能需求設(shè)計(jì)了一個包含HTTP服務(wù)器、MongoDB數(shù)據(jù)庫、Redis緩存和RabbitMQ消息隊(duì)列這四個模塊的總體架構(gòu)，并對各模塊進(jìn)行設(shè)計(jì)與實(shí)現(xiàn)。為了實(shí)現(xiàn)HTTP多核服務(wù)器的負(fù)載均衡、對子進(jìn)程狀態(tài)信息監(jiān)控和防止子進(jìn)程退出時丟失請求，本文對基于Node的HTTP多核服務(wù)器的分發(fā)者進(jìn)程和工作者進(jìn)程進(jìn)行了詳細(xì)設(shè)計(jì)。利用MongoDB性能優(yōu)勢和擴(kuò)展性，以及其shell客戶端、數(shù)據(jù)格式與JavaScript匹配優(yōu)勢，

6、設(shè)計(jì)并實(shí)現(xiàn)MongoDB接口層和更新服務(wù)。利用Redis在后端數(shù)據(jù)存儲上，可以實(shí)現(xiàn)一個高效的分層緩存機(jī)制，提高緩存的命中率，減少對數(shù)據(jù)庫的I/O操作的優(yōu)勢，對緩存層設(shè)計(jì)時使用Redis。另外，利用RabbitMQ有高性能、支持消息持久化和緩解系統(tǒng)中各個層次之間速率不一致的問題的優(yōu)勢，對緩存更新服務(wù)和數(shù)據(jù)庫更新服務(wù)設(shè)計(jì)了RabbitMQ消息隊(duì)列。
　　(4)對改進(jìn)后的Node多核服務(wù)器和本文設(shè)計(jì)的Web服務(wù)端進(jìn)行壓力測試，對比IIS