基于大數(shù)據(jù)的輔助專家分析系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、大數(shù)據(jù)時代，各行各業(yè)越來越多的企業(yè)或組織將受益于大數(shù)據(jù)這個發(fā)展機遇，大數(shù)據(jù)分析能夠?qū)崿F(xiàn)大數(shù)據(jù)規(guī)模效應(yīng)下的數(shù)據(jù)計算和全面的數(shù)據(jù)洞察，幫助企業(yè)提高生產(chǎn)力、提升競爭力、促進(jìn)企業(yè)革新。然而大數(shù)據(jù)分析對于許多企業(yè)或組織來說存在著許多難題，在數(shù)據(jù)庫軟件、大數(shù)據(jù)采集和規(guī)約、發(fā)展企業(yè)專業(yè)分析人員等方面仍存在著一些瓶頸。
　　為適應(yīng)企業(yè)的大數(shù)據(jù)分析需求，本文設(shè)計了基于大數(shù)據(jù)分析的輔助專家分析系統(tǒng)，集成了數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)分析、數(shù)據(jù)可視化等功能

2、，并提供了友好的人機交互界面，屏蔽大數(shù)據(jù)分析算法細(xì)節(jié)，以幫助企業(yè)人員簡單高效地使用大數(shù)據(jù)分析技術(shù)進(jìn)行高并發(fā)快速查詢，建立復(fù)雜數(shù)據(jù)處理模型，自定義可視化模塊來展現(xiàn)大數(shù)據(jù)的價值，促進(jìn)企業(yè)的業(yè)務(wù)提升、支持企業(yè)決策。
　　本文的輔助專家分析系統(tǒng)綜合利用了阿里云的ADS和MaxCompute兩個PaaS服務(wù)，后者是基于MapReduce框架的。MapReduce是在多節(jié)點上并行處理大數(shù)據(jù)的高可擴展的、具有容錯能力的編程框架，本文分類設(shè)計了基