基于Hadoop的瓦片數(shù)據(jù)管理研究.pdf

1、在最近的幾十年里，GIS（地理信息系統(tǒng)）技術(shù)取得了巨大的進(jìn)步，應(yīng)用也日趨廣泛和深化。作為GIS數(shù)據(jù)中的一種重要數(shù)據(jù)格式，地圖瓦片文件的存儲(chǔ)與管理也愈發(fā)得到人們的關(guān)注。早期的GIS運(yùn)行在單機(jī)系統(tǒng)上，主要以文件方式來(lái)管理瓦片文件，隨著計(jì)算機(jī)技術(shù)和Internet的發(fā)展，瓦片文件的管理逐漸走向網(wǎng)絡(luò)化以及分布式。瓦片地圖技術(shù)采用了“以空間換取時(shí)間”的策略，從而提供快速的地圖服務(wù)，給用戶(hù)帶來(lái)了更好的體驗(yàn)。這種策略帶來(lái)了磁盤(pán)空間浪費(fèi)、瓦片文件安全性

2、和共享性差等問(wèn)題。因此針對(duì)瓦片文件數(shù)據(jù)量大，文件小，結(jié)構(gòu)嚴(yán)格等特點(diǎn)，結(jié)合Hadoop分布式框架的特性，本文研究并設(shè)計(jì)了一套基于Hadoop的瓦片文件管理方案。
　　從瓦片文件的組織方式和存儲(chǔ)方式對(duì)瓦片文件的管理進(jìn)行研究，在對(duì)比分析了目前主流的幾種瓦片文件管理方法后，從以下幾個(gè)方面開(kāi)展工作:在對(duì)瓦片文件結(jié)構(gòu)分析的基礎(chǔ)上，設(shè)計(jì)并實(shí)現(xiàn)一套瓦片緊湊方法，將原有的松散瓦片文件轉(zhuǎn)化為緊湊瓦片文件;建立瓦片文件的兩級(jí)索引機(jī)制，為第三方GIS平臺(tái)

3、或用戶(hù)訪問(wèn)瓦片文件提供接口;實(shí)現(xiàn)瓦片文件在Hadoop中的分布式管理，解決瓦片文件存儲(chǔ)中磁盤(pán)空間浪費(fèi)以及安全性和共享性等問(wèn)題;建立兩級(jí)瓦片文件訪問(wèn)機(jī)制，提供瓦片文件的多并發(fā)訪問(wèn)，保證多用戶(hù)多并發(fā)情況下的數(shù)據(jù)訪問(wèn)穩(wěn)定。
　　本文探索性地將Hadoop技術(shù)引入GIS系統(tǒng)，通過(guò)基于Hadoop的云技術(shù)和架構(gòu)提升電子地圖瓦片的存儲(chǔ)效率、傳輸效率，設(shè)計(jì)并實(shí)現(xiàn)一種具有創(chuàng)新性的瓦片文件的緊湊型組織方式，并在此基礎(chǔ)上發(fā)布電子地圖瓦片，對(duì)外提供基礎(chǔ)