卡口大數(shù)據(jù)管理應用平臺標準方案

1、1卡口大數(shù)據(jù)管理應用平臺解決方案1 整體架構設計 整體架構設計1.1 總體設計目標 總體設計目標? 統(tǒng)一接入卡口過車數(shù)據(jù)和過車圖片，并按大數(shù)據(jù)架構統(tǒng)一存儲管理。? 對入庫過車圖片進行二次識別，單套設備支持不少于每天 200 萬張卡口高清圖片二次識別。? 對上層提供統(tǒng)一的大數(shù)據(jù)共享訪問服務和應用支撐服務（采用WebService 接口方式）? 提供統(tǒng)一的大數(shù)據(jù)卡口稽查布控管理應用軟件。? 基于 Hadoop 的大數(shù)據(jù)云存儲技術，實現(xiàn) PB

2、 級過車數(shù)據(jù)和過車圖片統(tǒng)一存儲和數(shù)據(jù)索引管理。? 基于 Hadoop 的大數(shù)據(jù)云計算技術，實現(xiàn)至少 100 億條以上的過車記錄大數(shù)據(jù)量 1 秒內檢索能力。? 支持高速隨機 Key-Value 的查詢/插入和低延時的統(tǒng)計能力，單臺服務器數(shù)據(jù)插入性能可達到 7 千記錄/秒（每條記錄 1KB） 。? 通過不停機添加計算節(jié)點，可線性提高系統(tǒng)的存儲容量和查詢、統(tǒng)計、分析、計算能力，計算延時可線性降低。集群規(guī)模達到 10 臺時，性能可達到 7 萬記

3、錄/秒。3化數(shù)據(jù)的混合存取，并提供有高效的數(shù)據(jù)索引/檢索智能算法，擁有成本低、效率高、擴展好、高可靠等多項優(yōu)勢特性。管理服務器（主）SCD1000-CN管理服務器（備）SCD1000-CN數(shù)據(jù)服務器 SCD1000-DN數(shù)據(jù)服務器 SCD1000-DN數(shù)據(jù)服務器 SCD1000-DN數(shù)據(jù)服務器 SCD1000-DNScale Out 平行擴展1. 統(tǒng)一接入存儲大數(shù)據(jù)一體機業(yè)務集群提供統(tǒng)一接入接口，將各監(jiān)控設備上的卡口數(shù)據(jù)通過同一接口寫入

4、大數(shù)據(jù)中心。在查詢時，各操作人員使用的信息系統(tǒng)也可以通過統(tǒng)一接入接口對數(shù)據(jù)進行讀取、查詢、統(tǒng)計等工作。2. 高性能高并發(fā)實時數(shù)據(jù)讀寫由于卡口數(shù)據(jù)系統(tǒng)每秒鐘都由幾千個終端產生海量的數(shù)據(jù)，大數(shù)據(jù)一體機業(yè)務集群能夠提供高性能和高并發(fā)的實時數(shù)據(jù)讀寫。如果在性能上不能到達要求，就會產生寫不進查不出等問題，造成系統(tǒng)無法使用。3. 海量數(shù)據(jù)存儲能力基于公安卡口數(shù)據(jù)的特點，在加入冗余容錯的需求下，大數(shù)據(jù)一體機業(yè)務集群具備 PB 數(shù)據(jù)級別的在線存儲能力。