基于云計算的土地利用矢量數(shù)據(jù)高效處理技術(shù)研究.pdf

1、土地利用矢量數(shù)據(jù)是土地調(diào)查產(chǎn)生的成果數(shù)據(jù)，是土地利用狀況分析評價的數(shù)據(jù)基礎(chǔ)，也是國土資源部門把握土地利用情況的重要依據(jù)。當(dāng)前，全國大部分省級土地利用現(xiàn)狀管理系統(tǒng)采用關(guān)系型數(shù)據(jù)庫與ArcSDE協(xié)同管理空間數(shù)據(jù)，如Oracle+ArcSDE、SQL Server+ArcSDE等方式，上述方法中土地利用矢量數(shù)據(jù)存儲在單臺服務(wù)器上，極大的限制了數(shù)據(jù)的安全性和計算能力。隨著土地調(diào)查的深入，我國各省份土地利用矢量數(shù)據(jù)不斷增加，傳統(tǒng)的數(shù)據(jù)管理方法已不

2、能滿足土地利用矢量數(shù)據(jù)存儲、管理的需求，也嚴(yán)重制約了土地利用矢量數(shù)據(jù)的分析和處理效率。
　　為了提高土地利用矢量數(shù)據(jù)的管理與計算效率，本文在研究云計算技術(shù)與現(xiàn)有的土地利用矢量數(shù)據(jù)特點(diǎn)的基礎(chǔ)上，對云環(huán)境下的土地利用矢量數(shù)據(jù)的存儲與計算進(jìn)行了深入的研究，本文主要研究內(nèi)容有以下幾點(diǎn):
　　1.設(shè)計了云環(huán)境下的省級土地利用矢量數(shù)據(jù)組織方法，即按縣級行政區(qū)分層存儲，并將縣級行政區(qū)邊界存儲到文件中，以便于進(jìn)行跨縣的空間操作。對于土地利用

3、矢量數(shù)據(jù)的存儲，本文采用遵循WKT標(biāo)準(zhǔn)的TSV格式，將屬性數(shù)據(jù)與空間數(shù)據(jù)存儲在同一個文件中。
　　2.研究了云環(huán)境下的土地利用矢量數(shù)據(jù)并行導(dǎo)入方法，通過Sqoop與基于GDAL開發(fā)的數(shù)據(jù)并行導(dǎo)入工具協(xié)同運(yùn)行的方式，實(shí)現(xiàn)從關(guān)系型數(shù)據(jù)庫、Shapefile、MDB等數(shù)據(jù)源中并行導(dǎo)入數(shù)據(jù)。
　　3.研究了云環(huán)境下的土地利用矢量數(shù)據(jù)四叉樹索引的批量并行創(chuàng)建方法，以提高空間索引創(chuàng)建的效率。
　　4.設(shè)計了一套基于Spark技術(shù)對