阿里云上基于規(guī)則的數(shù)據(jù)質量管理系統(tǒng)的設計與實現(xiàn).pdf

1、按照國家稅務總局“互聯(lián)網(wǎng)+稅務”行動的戰(zhàn)略部署，隨著數(shù)據(jù)集中、大數(shù)據(jù)應用等項目的逐漸開展，各省對于數(shù)據(jù)質量提升的需求，越來越迫切。為了滿足總局對數(shù)據(jù)質量提升的需求，為了指導數(shù)據(jù)質量工作的開展，建立一個完整、準確的數(shù)據(jù)質量管理體系，架設一個專業(yè)、高效的數(shù)據(jù)質量監(jiān)控平臺，成為一種必然的趨勢。
　　本文所描述的是采用B/S網(wǎng)絡架構、Sword框架、J2EE技術與java語言實現(xiàn)數(shù)據(jù)質量管理系統(tǒng)。該系統(tǒng)同時運用了成熟的阿里云技術和產品，包

2、括對象存儲(OSS)、大數(shù)據(jù)計算服務(ODPS)、云數(shù)據(jù)庫(RDS)和云服務器(ECS)，等。系統(tǒng)設計時采用了包含展示層、服務層、中間層、數(shù)據(jù)層的四層架構，同時采用云數(shù)據(jù)庫(RDS)進行數(shù)據(jù)存儲。本系統(tǒng)所使用的關鍵技術除了阿里云相關的一系列組件外，還運用了JSqlParser插件解析SQL語句，運用Quartz組件進行任務調度。
　　經過設計與實現(xiàn)環(huán)節(jié)，數(shù)據(jù)質量管理系統(tǒng)所實現(xiàn)的功能有質量需求管理功能、質量規(guī)則管理功能、質量任務管理

3、功能、質量問題管理功能和質量問題監(jiān)控功能。其中，質量需求管理最終實現(xiàn)質量需求定義和質量需求維護。質量規(guī)則管理最終實現(xiàn)質量規(guī)則定義和質量規(guī)則維護兩個功能菜單。質量任務管理最終實現(xiàn)質量任務定義、質量任務維護、質量任務審批、質量任務運行監(jiān)控和質量任務結果查看五個功能菜單。質量問題管理最終實現(xiàn)質量問題定義、質量問題維護和質量問題推送三個功能菜單。質量問題監(jiān)控最終實現(xiàn)問題監(jiān)控總覽、質量整改監(jiān)控和質量問題統(tǒng)計查詢三個功能菜單。
　　數(shù)據(jù)質量管