彩鈴統(tǒng)計分析平臺數(shù)據(jù)采集與預(yù)處理子系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、彩鈴業(yè)務(wù)是“個性化多彩回鈴音業(yè)務(wù)”(Color Ring Back Tone)的簡稱，是一項由被叫用戶定制，為主叫用戶提供一段悅耳的音樂或一句問候語來替代普通回鈴音的業(yè)務(wù)。 近年來，彩鈴業(yè)務(wù)以其新穎、個性化的特點，在國內(nèi)得到了迅速發(fā)展，已經(jīng)成為電信運營商ARPU(Average Revenue Per User)值的重要貢獻力量和新的利潤增長點。彩鈴用戶多為年輕人群，為了滿足他們追求時尚和個性的需求，運營商不斷推出彩鈴新功能和特

2、色服務(wù)，并不定期地舉辦各種營銷活動。為了更好地監(jiān)控業(yè)務(wù)的運行，發(fā)現(xiàn)用戶偏好，運營商提出的統(tǒng)計需求越來越多，并需要及時得到統(tǒng)計數(shù)據(jù)并加以分析。傳統(tǒng)上，這些需求的實現(xiàn)需要加載到彩鈴業(yè)務(wù)主機運行。這在一定程度上消耗了彩鈴系統(tǒng)的主機資源，影響彩鈴系統(tǒng)的正常運行。另一方面，統(tǒng)計分析的結(jié)果不夠豐富和靈活，及時性、針對性不強，難以滿足運營商的要求。 彩鈴統(tǒng)計分析平臺(Color-ring Statistic Platform，CSP)是專為彩

3、鈴業(yè)務(wù)推出的統(tǒng)計分析解決方案。通過把彩鈴業(yè)務(wù)相關(guān)數(shù)據(jù)采集到專有的統(tǒng)計分析主機，然后在此主機上進行數(shù)據(jù)加工和運算，從而有效地緩解了彩鈴系統(tǒng)的運行壓力，降低了彩鈴業(yè)務(wù)主機的負荷。同時，該系統(tǒng)充分利用了統(tǒng)計主機的計算能力和存儲資源，更有效地進行數(shù)據(jù)加工，向用戶提供專業(yè)、詳實的統(tǒng)計數(shù)據(jù)，并通過多種方式展現(xiàn)給用戶。 彩鈴統(tǒng)計分析平臺可劃分為數(shù)據(jù)采集層、數(shù)據(jù)預(yù)處理層、數(shù)據(jù)處理層和數(shù)據(jù)展現(xiàn)層四個功能層。本文的核心是設(shè)計并實現(xiàn)數(shù)據(jù)采集與預(yù)處理子

4、系統(tǒng)，它實現(xiàn)了數(shù)據(jù)采集層和數(shù)據(jù)預(yù)處理層的功能。數(shù)據(jù)采集層負責將原始數(shù)據(jù)從彩鈴業(yè)務(wù)主機批量采集到統(tǒng)計分析主機，加載到數(shù)據(jù)庫中。數(shù)據(jù)預(yù)處理層則根據(jù)預(yù)先定義的規(guī)則，對原始數(shù)據(jù)進行清洗和格式轉(zhuǎn)換，刪除臟數(shù)據(jù)并保證數(shù)據(jù)格式的正確性，為上層系統(tǒng)提供可靠的數(shù)據(jù)保障。 本文從彩鈴業(yè)務(wù)的發(fā)展現(xiàn)狀展開討論，第一章介紹了彩鈴業(yè)務(wù)的背景，分析了運營商對彩鈴統(tǒng)計的需求，并介紹了彩鈴統(tǒng)計分析平臺的總體結(jié)構(gòu)。第二章詳細分析了本文核心的數(shù)據(jù)采集與預(yù)處理子系統(tǒng)的

5、需求，對子系統(tǒng)的實現(xiàn)難點和關(guān)鍵技術(shù)特征進行了總結(jié)，并對比不同的解決方法，找到了合理的解決方案。第三章在需求分析的基礎(chǔ)之上，對子系統(tǒng)的設(shè)計與實現(xiàn)進行詳細的介紹。首先介紹了子系統(tǒng)的結(jié)構(gòu)和工作流程，并根據(jù)功能將子系統(tǒng)劃分為數(shù)據(jù)采集、歷史數(shù)據(jù)管理和數(shù)據(jù)預(yù)處理三大模塊。然后對各個模塊的詳細設(shè)計與實現(xiàn)進行了介紹。第四章對數(shù)據(jù)采集與預(yù)處理子系統(tǒng)進行了測試，以驗證其滿足系統(tǒng)需求。最后一章對彩鈴統(tǒng)計分析平臺的現(xiàn)狀進行了介紹，提出了需要改進和進一步研究的問