云環(huán)境中典型應(yīng)用的I-O優(yōu)化策略研究.pdf

1、云計算是當前工業(yè)界和學術(shù)研究的熱點之一。云環(huán)境中的應(yīng)用具有服務(wù)規(guī)模和數(shù)據(jù)規(guī)模超大的特點，現(xiàn)有軟硬件架構(gòu)與應(yīng)用特點不匹配，導致系統(tǒng)高能耗、低效率。這些應(yīng)用對計算機體系結(jié)構(gòu)、網(wǎng)絡(luò)技術(shù)和軟件的設(shè)計提出了嚴峻的挑戰(zhàn)。在云環(huán)境中，服務(wù)器端存儲了海量的數(shù)據(jù)，I/O訪問的效率成為應(yīng)用性能的關(guān)鍵因素之一。
　　 研究服務(wù)器I/O相關(guān)問題的優(yōu)化策略，具有非常重要的研究意義和應(yīng)用價值。為了研究云環(huán)境中應(yīng)用對I/O性能的要求，論文采取應(yīng)用驅(qū)動的思想，

2、選擇了流媒體服務(wù)、電子郵件服務(wù)和Web服務(wù)等三個典型的互聯(lián)網(wǎng)應(yīng)用；然后，從磁盤訪問、網(wǎng)絡(luò)通信和內(nèi)存訪問等多個的角度出發(fā)，研究了特定應(yīng)用的I/O訪問優(yōu)化策略。
　　 對于流媒體應(yīng)用中交互請求對服務(wù)器端造成的I/O壓力，論文在分析流媒體的數(shù)據(jù)特征的基礎(chǔ)上，針對交互請求訪問數(shù)據(jù)的要求，對流媒體文件的數(shù)據(jù)組織進行了重排，提出了數(shù)據(jù)幀分類的文件流化格式，為區(qū)間緩存算法增加了針對交互的改進策略，并從理論上分析了數(shù)據(jù)幀分類存儲對緩存算法的影響

3、。
　　 我們分析郵件應(yīng)用的典型場景，揭示了郵件傳播中信息冗余的現(xiàn)象，利用服務(wù)器和客戶端的計算能力，把內(nèi)容去重的思想應(yīng)用于郵件服務(wù)器的數(shù)據(jù)存儲和傳輸，減輕了服務(wù)器端的磁盤訪問和網(wǎng)絡(luò)I/O壓力。
　　 最后，我們綜合了三個應(yīng)用的內(nèi)存訪問特點，提出一個針對這三種應(yīng)用的智能存儲方案，設(shè)計了內(nèi)存訪問控制器、智能內(nèi)存單元、互聯(lián)網(wǎng)絡(luò)和通信協(xié)議，并給出了基本的編程模型草案。根據(jù)DRAM內(nèi)存訪問的特點，結(jié)合不同數(shù)據(jù)訪問的特征，在智能內(nèi)存

4、、常規(guī)內(nèi)存和靜態(tài)內(nèi)存這樣一個混合存儲系統(tǒng)中，提出分類的存儲策略，以提高系統(tǒng)訪問內(nèi)存的效率。
　　 論文主要的貢獻和創(chuàng)新包括以下幾點：
　　 1.我們分析了請求的數(shù)據(jù)訪問和視頻數(shù)據(jù)的特征，提出了針對交互的數(shù)據(jù)幀分類存儲的流化方案；與播放器協(xié)作，減少了拖動操作對網(wǎng)絡(luò)I/O的需求；根據(jù)SSD硬盤的訪問特征，提出了混合存儲的方案，并重組了流媒體的數(shù)據(jù)組織，加快了服務(wù)器對拖動的響應(yīng)速度。
　　 2.對于流媒體服務(wù)，我們從理

5、論上證明了區(qū)間緩存算法要優(yōu)于LRU算法；結(jié)合交互的訪存特征提出了面向交互的區(qū)間緩存算法，并用競爭分析從理論上分析了幀分類存儲模式對交互的區(qū)間緩存算法的影響；最后通過改進內(nèi)存管理和流媒體的存儲，進一步提高了緩存算法的效率。
　　 3.我們修改了郵件服務(wù)器的架構(gòu)，提出了郵件正文和附件分離存儲的策略，利用服務(wù)器閑置的計算資源對附件進行內(nèi)容去重，減少了磁盤I/O訪問，節(jié)省了存儲空間；進一步，我們基于內(nèi)容去重對SMTP協(xié)議進行了擴展，減少