面向渲染應(yīng)用的分布式數(shù)據(jù)管理與訪問優(yōu)化.pdf

1、隨著影視行業(yè)的蓬勃發(fā)展,從傳統(tǒng)的2D平面電影時(shí)代發(fā)展到風(fēng)靡全球的3D數(shù)字化電影時(shí)代,而達(dá)到這種效果的關(guān)鍵技術(shù)之一就是渲染技術(shù)。隨著單機(jī)越來越無法滿足渲染應(yīng)用的處理需求,分布式集群下的渲染應(yīng)用也逐漸普遍起來,強(qiáng)大的集群計(jì)算能力帶給渲染應(yīng)用性能上的巨大提升,但同時(shí)由于渲染應(yīng)用頻繁的數(shù)據(jù)IO訪問,使得磁盤IO成為了提升分布式渲染應(yīng)用性能的瓶頸。
　　基于內(nèi)存存儲(chǔ)的分布式數(shù)據(jù)緩存系統(tǒng)通過構(gòu)建一個(gè)分布式的共享內(nèi)存區(qū)域的方式,來存放所有分布式

2、渲染應(yīng)用過程中產(chǎn)生的數(shù)據(jù)。在高效的分布式內(nèi)存資源管理模塊中,利用內(nèi)存池狀態(tài)信息管理機(jī)制來實(shí)現(xiàn)對(duì)共享內(nèi)存的實(shí)時(shí)監(jiān)控;利用內(nèi)存數(shù)據(jù)信息管理機(jī)制來記錄所有存儲(chǔ)在共享內(nèi)存中文件數(shù)據(jù)的元數(shù)據(jù)信息,以方便快速查找到它們的位置;利用內(nèi)存空間申請(qǐng)回收管理機(jī)制為上層渲染用戶提供內(nèi)存資源申請(qǐng)與釋放的服務(wù),讓渲染用戶可以自由的使用內(nèi)存資源。同時(shí)在傳統(tǒng)分布式數(shù)據(jù)訪問方式的基礎(chǔ)上,針對(duì)渲染系統(tǒng)的特點(diǎn)提出了兩種數(shù)據(jù)訪問優(yōu)化策略。雙層多粒度鎖機(jī)制,在避免了多個(gè)渲染用

3、戶的數(shù)據(jù)訪問沖突的前提下,有效的減少了等待延遲的開銷。在用戶讀數(shù)據(jù)之前的預(yù)處理過程中,數(shù)據(jù)預(yù)取優(yōu)化策略有效的避免了對(duì)同一個(gè)存儲(chǔ)節(jié)點(diǎn)重復(fù)數(shù)據(jù)傳輸情況的發(fā)生,減少了網(wǎng)絡(luò)開銷,提高了數(shù)據(jù)訪問的效率。
　　實(shí)驗(yàn)表明,面向渲染應(yīng)用下的分布式數(shù)據(jù)緩存系統(tǒng)能夠很好的滿足了渲染應(yīng)用數(shù)據(jù)存儲(chǔ)和訪問需求。完備的分布式內(nèi)存數(shù)據(jù)管理為渲染應(yīng)用提供了可靠的數(shù)據(jù)保障;針對(duì)渲染系統(tǒng)特點(diǎn)的數(shù)據(jù)訪問優(yōu)化策略,在滿足渲染應(yīng)用需求的基礎(chǔ)上,給渲染應(yīng)用數(shù)據(jù)讀取帶來了性能