基于storm的實(shí)時(shí)物流數(shù)據(jù)查詢系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、基于物聯(lián)網(wǎng)的智慧物流是在物流配送中集成智能化技術(shù)，它為物流管理提供豐富的管理信息，使物流能夠具有思維，感知，分析學(xué)習(xí)和自動(dòng)解決配送中的問題的能力，從而高效，快捷，方便地存儲(chǔ)和運(yùn)輸貨物。隨著物流功能的擴(kuò)展，傳統(tǒng)物流管理系統(tǒng)存在以下不足。（1）智能物流通過傳感器將物流貨物的溫度信息，濕度信息等詳細(xì)信息實(shí)時(shí)傳送至服務(wù)器端供用戶查詢，物流信息的數(shù)據(jù)量開始爆炸式地增長(zhǎng)，而傳統(tǒng)物流管理系統(tǒng)存在單節(jié)點(diǎn)運(yùn)算的性能瓶頸，無(wú)法處理物流管理中產(chǎn)生的海量數(shù)據(jù)。

2、（2）物流數(shù)據(jù)源源不斷地產(chǎn)生，具有無(wú)限性，實(shí)時(shí)性，多樣性等特點(diǎn)，人們對(duì)于物流數(shù)據(jù)處理的方式趨向于實(shí)時(shí)化，個(gè)性化查詢，傳統(tǒng)的物流信息管理系統(tǒng)無(wú)法滿足人們對(duì)實(shí)時(shí)的多樣化的物流數(shù)據(jù)查詢的需要。本論文針對(duì)以上問題，調(diào)研推特公司推出的storm實(shí)時(shí)分布式流處理平臺(tái)和斯坦福大學(xué)的數(shù)據(jù)流管理系統(tǒng)stream，針對(duì)實(shí)時(shí)的物流數(shù)據(jù)處理設(shè)計(jì)實(shí)現(xiàn)了基于storm的實(shí)時(shí)物流數(shù)據(jù)查詢系統(tǒng)，主要進(jìn)行了如下的研究實(shí)現(xiàn)工作。
　　首先，論文設(shè)計(jì)了結(jié)構(gòu)化持續(xù)查詢語(yǔ)

3、言CSQL（Continues Struct Query Language），并基于開源工具antlr開發(fā)該語(yǔ)言的詞法語(yǔ)法解析器。CSQL選取了stream系統(tǒng)中的持續(xù)查詢語(yǔ)言CQL（Continues Query Language）中支持監(jiān)控的查詢語(yǔ)句，并結(jié)合SQL(Struct Query Language)的語(yǔ)法規(guī)則做了相應(yīng)的簡(jiǎn)化，并通過antlr開發(fā)了詞法和語(yǔ)法分析工具，對(duì)于錯(cuò)誤的關(guān)鍵字詞提示詞法錯(cuò)誤信息，同時(shí)對(duì)語(yǔ)法有錯(cuò)誤的語(yǔ)句

4、提示語(yǔ)法錯(cuò)誤信息，從而使數(shù)據(jù)管理員能夠使用簡(jiǎn)單的查詢語(yǔ)句實(shí)現(xiàn)復(fù)雜的數(shù)據(jù)分析功能。
　　其次，論文完成了實(shí)時(shí)物流查詢系統(tǒng)中以下三個(gè)關(guān)鍵模塊的設(shè)計(jì)與編碼工作。（1）對(duì)查詢語(yǔ)句的語(yǔ)義提取。（2）邏輯計(jì)劃生成。（3）物理拓?fù)涮峤弧?duì)于通過詞法和語(yǔ)法解析的正確查詢語(yǔ)句，服務(wù)器對(duì)于該語(yǔ)句進(jìn)行語(yǔ)義的提取，并結(jié)合語(yǔ)義生成邏輯計(jì)劃，通過算子優(yōu)先級(jí)選擇、組合、調(diào)度算子集中的算子，優(yōu)化邏輯計(jì)劃，最終生成物理執(zhí)行拓?fù)洌峤恢羢torm平臺(tái)運(yùn)行。從而使不熟