總體框架 在智慧城市海量數(shù)據(jù)的背景下,以新型智慧城市信息化系統(tǒng)中間件為核心設計理念,以不同維度為客戶提供量身定制的產(chǎn)品為原則,科學梳理不同部門的圖像及數(shù)據(jù)監(jiān)管需求并將其納入數(shù)據(jù)中心集中管理,通過小v(大數(shù)據(jù)平臺)創(chuàng)新的大數(shù)據(jù)分析處理技術,對這些數(shù)據(jù)進行分析、挖掘、提煉,從各種海量的數(shù)據(jù)中成長出各式各樣的業(yè)務,進而為新型智慧城市建設提供多源信息采集、海量數(shù)據(jù)匯聚、智能分析處理、大數(shù)據(jù)深度挖掘、城市態(tài)勢展報、惠民信息等多樣化服務,創(chuàng)建城市管理社會服務新模式,從而實現(xiàn)新型智慧城市的核心價值。
小v大數(shù)據(jù)引擎 而小v大數(shù)據(jù)引擎,是利用開源大數(shù)據(jù)平臺,為智慧城市提供一個可橫向擴充的、高性能的大數(shù)據(jù)管理平臺,其主要功能包括各種數(shù)據(jù)提供快速的提供秒級查詢與統(tǒng)計(OLAP)、實時模型對比、預測預警、定時離線分析、數(shù)據(jù)清洗與重塑等功能。
系統(tǒng)亮點特色 1、系統(tǒng)能力的橫向擴充,一個智慧城市物聯(lián)網(wǎng)管理環(huán)節(jié)在剛開始搭建的時候,收集到的數(shù)據(jù)量并不是很大,但隨著時間的推移,采集到各式各樣的數(shù)據(jù)會隨著時間堆積,系統(tǒng)會隨著數(shù)據(jù)的增加在存儲空間、統(tǒng)計報表、數(shù)據(jù)檢索、離線分析方面會變的越來越慢,到最后物理網(wǎng)經(jīng)營者或系統(tǒng)管理者,不能不選擇放棄系統(tǒng)所采集到的有價值的數(shù)據(jù),而這些數(shù)據(jù)都蘊含著各種各樣的價值。小V大數(shù)據(jù)引擎它兼顧Hadoop-Spark大數(shù)據(jù)系統(tǒng)所有特征,提供性能與存儲的1+N的橫向擴充,也就是隨著時間的推移數(shù)據(jù)的累積,當單臺小V大數(shù)據(jù)引擎不能滿足性能與存儲要求,可以通過增加數(shù)據(jù)節(jié)點,是系統(tǒng)能力得到線性的增加。 2、去中心化軟件系統(tǒng),去中心化是使系統(tǒng)穩(wěn)定性,每個節(jié)點都是一個完整的大數(shù)據(jù)系統(tǒng),多個節(jié)點互相連接組成一個性能更高的大數(shù)據(jù)集群。當大數(shù)據(jù)集群中某個節(jié)點出現(xiàn)故障時,不會影響整個集群的穩(wěn)定性。 3、數(shù)據(jù)安全性,采集到的數(shù)據(jù)一旦進入大數(shù)據(jù)系統(tǒng)就很難丟失。數(shù)據(jù)被按照數(shù)據(jù)塊備份多份分布在不同的數(shù)據(jù)節(jié)點中,而一個節(jié)點的故障不會影響整個系統(tǒng),當這個節(jié)點恢復時,這個節(jié)點的數(shù)據(jù)也會被修復。 4、適合于海量數(shù)據(jù)的處理與分析,系統(tǒng)就是為海量數(shù)據(jù)處理而設計的,小V大數(shù)據(jù)引擎可高速的對海量數(shù)據(jù)進行統(tǒng)計分析,數(shù)據(jù)搜尋秒級響應,實時模型對比、預測預警、定時離線分析、數(shù)據(jù)清洗與重塑等功能,能夠實現(xiàn)數(shù)據(jù)的價值轉換。 5、使用靈活,小V大數(shù)據(jù)引擎提供統(tǒng)一方便的SDK,方便于基礎到多個系統(tǒng)中?筛鶕(jù)用戶與物聯(lián)網(wǎng)系統(tǒng)經(jīng)營者的需求,根據(jù)所采集的數(shù)據(jù),做離線分析、機器學習,對整個物聯(lián)網(wǎng)IoT進行不斷地優(yōu)化,給出各種優(yōu)化建議,能夠降低整個系統(tǒng)的使用成本,真正做到高效、節(jié)能、安全、省心、省錢。
|