11499.基于hadoop的氣溫?cái)?shù)據(jù)組織及時(shí)空分異特征提取方法研究

1、NanjingNormalUniversityADissertationSubmittedinPartialFulfillmentoftheRequirementsfortheDegreeofMasterofScience園StudyonMeteorologicalDataOrganizationMethodandSpatialtemporalDifferentiationCharacteristicsExtractionMethodb

2、asedontheHadoopCandidate：ChengBinbinCollege：CollegeofGeographicalScienceSupervisor：ProfSunZaihongSpeciality：CartologyandGISDateFinished：May2015DateApproved：May2015摘要摘要?dú)鉁匾厥菤庀笱芯康臒狳c(diǎn)對(duì)象，深入了解氣溫要素的變化規(guī)律有助于提高氣象預(yù)報(bào)精度，對(duì)指導(dǎo)農(nóng)業(yè)生產(chǎn)、生態(tài)治理也

3、具有重要意義。隨著氣象事業(yè)信息化程度的不斷提高，氣象科研和管理活動(dòng)中采集并積累了大量氣象信息資料。氣象信息種類繁多，格式迥異、管理分散等特點(diǎn)，極大阻礙了公共氣象信息服務(wù)的發(fā)展。目前對(duì)氣象數(shù)據(jù)的研究存在海量氣象數(shù)據(jù)處理效率低，多種研究技術(shù)的融合程度低等問(wèn)題，無(wú)法滿足氣象服務(wù)的時(shí)效性和內(nèi)容豐富性的要求。此外還缺乏針對(duì)于氣溫日變化的時(shí)空分異特征的大尺度、多維度的研究。Hadoop這一開(kāi)源的云計(jì)算框架為海量氣象數(shù)據(jù)的研究提供了新的手段?；诖?，

4、本文在已有的氣象學(xué)理論研究基礎(chǔ)上，以Hadoop和GIS為技術(shù)支撐，引入云計(jì)算和地理學(xué)中相關(guān)的數(shù)據(jù)分析、處理方法，顧及地域?qū)鉁氐挠绊?，以美?guó)國(guó)家氣候數(shù)據(jù)中心(以下簡(jiǎn)稱NCDC)20092013五年的全球地面小時(shí)觀測(cè)數(shù)據(jù)為數(shù)據(jù)源，進(jìn)行數(shù)據(jù)組織方法的設(shè)計(jì)和氣溫日變化時(shí)空分異特征的提取。主要研究?jī)?nèi)容和研究成果如下：(1)針對(duì)氣溫觀測(cè)日志數(shù)據(jù)的特點(diǎn)，基于HBase研究海量氣象時(shí)空數(shù)據(jù)組織方法。研究并設(shè)計(jì)了氣象數(shù)據(jù)的表結(jié)構(gòu)，索引機(jī)制及入庫(kù)方式，

5、并提出了HBase運(yùn)行參數(shù)的優(yōu)化方案。通過(guò)引入So|r分布式搜索引擎的索引機(jī)制解決了HBase不支持二級(jí)輔助索引的問(wèn)題。(2)借助Hadoop平臺(tái)和GIS平臺(tái)，研究氣溫日變化時(shí)空分異特征提取的方法?；贛apReduce編程模型研究并設(shè)計(jì)了氣溫因子提取、統(tǒng)計(jì)，氣溫日變化曲線模擬的分布式算法。在此基礎(chǔ)上，借助GIS地學(xué)分析方法研究并設(shè)計(jì)了氣溫日變化空間影響因素提取、計(jì)算方法。(3)對(duì)文中提出的氣象數(shù)據(jù)組織方法、氣溫日變化時(shí)空分異特征提取方