總體框架

在智慧城市海量數(shù)據(jù)的背景下，以新型智慧城市信息化系統(tǒng)中間件為核心設(shè)計理念，以不同維度為客戶提供量身定制的產(chǎn)品為原則，科學(xué)梳理不同部門的圖像及數(shù)據(jù)監(jiān)管需求并將其納入數(shù)據(jù)中心集中管理，通過小v(大數(shù)據(jù)平臺)創(chuàng)新的大數(shù)據(jù)分析處理技術(shù)，對這些數(shù)據(jù)進(jìn)行分析、挖掘、提煉，從各種海量的數(shù)據(jù)中成長出各式各樣的業(yè)務(wù)，進(jìn)而為新型智慧城市建設(shè)提供多源信息采集、海量數(shù)據(jù)匯聚、智能分析處理、大數(shù)據(jù)深度挖掘、城市態(tài)勢展報、惠民信息等多樣化服務(wù)，創(chuàng)建城市管理社會服務(wù)新模式，從而實現(xiàn)新型智慧城市的核心價值。

小v大數(shù)據(jù)引擎

而小v大數(shù)據(jù)引擎，是利用開源大數(shù)據(jù)平臺，為智慧城市提供一個可橫向擴(kuò)充的、高性能的大數(shù)據(jù)管理平臺，其主要功能包括各種數(shù)據(jù)提供快速的提供秒級查詢與統(tǒng)計(OLAP)、實時模型對比、預(yù)測預(yù)警、定時離線分析、數(shù)據(jù)清洗與重塑等功能。

系統(tǒng)亮點特色

1、系統(tǒng)能力的橫向擴(kuò)充，一個智慧城市物聯(lián)網(wǎng)管理環(huán)節(jié)在剛開始搭建的時候，收集到的數(shù)據(jù)量并不是很大，但隨著時間的推移，采集到各式各樣的數(shù)據(jù)會隨著時間堆積，系統(tǒng)會隨著數(shù)據(jù)的增加在存儲空間、統(tǒng)計報表、數(shù)據(jù)檢索、離線分析方面會變的越來越慢，到最后物理網(wǎng)經(jīng)營者或系統(tǒng)管理者，不能不選擇放棄系統(tǒng)所采集到的有價值的數(shù)據(jù)，而這些數(shù)據(jù)都蘊含著各種各樣的價值。小V大數(shù)據(jù)引擎它兼顧Hadoop-Spark大數(shù)據(jù)系統(tǒng)所有特征，提供性能與存儲的1+N的橫向擴(kuò)充，也就是隨著時間的推移數(shù)據(jù)的累積，當(dāng)單臺小V大數(shù)據(jù)引擎不能滿足性能與存儲要求，可以通過增加數(shù)據(jù)節(jié)點，是系統(tǒng)能力得到線性的增加。

2、去中心化軟件系統(tǒng)，去中心化是使系統(tǒng)穩(wěn)定性，每個節(jié)點都是一個完整的大數(shù)據(jù)系統(tǒng)，多個節(jié)點互相連接組成一個性能更高的大數(shù)據(jù)集群。當(dāng)大數(shù)據(jù)集群中某個節(jié)點出現(xiàn)故障時，不會影響整個集群的穩(wěn)定性。

3、數(shù)據(jù)安全性，采集到的數(shù)據(jù)一旦進(jìn)入大數(shù)據(jù)系統(tǒng)就很難丟失。數(shù)據(jù)被按照數(shù)據(jù)塊備份多份分布在不同的數(shù)據(jù)節(jié)點中，而一個節(jié)點的故障不會影響整個系統(tǒng)，當(dāng)這個節(jié)點恢復(fù)時，這個節(jié)點的數(shù)據(jù)也會被修復(fù)。

4、適合于海量數(shù)據(jù)的處理與分析，系統(tǒng)就是為海量數(shù)據(jù)處理而設(shè)計的，小V大數(shù)據(jù)引擎可高速的對海量數(shù)據(jù)進(jìn)行統(tǒng)計分析，數(shù)據(jù)搜尋秒級響應(yīng)，實時模型對比、預(yù)測預(yù)警、定時離線分析、數(shù)據(jù)清洗與重塑等功能，能夠?qū)崿F(xiàn)數(shù)據(jù)的價值轉(zhuǎn)換。

5、使用靈活，小V大數(shù)據(jù)引擎提供統(tǒng)一方便的SDK，方便于基礎(chǔ)到多個系統(tǒng)中。可根據(jù)用戶與物聯(lián)網(wǎng)系統(tǒng)經(jīng)營者的需求，根據(jù)所采集的數(shù)據(jù)，做離線分析、機(jī)器學(xué)習(xí)，對整個物聯(lián)網(wǎng)IoT進(jìn)行不斷地優(yōu)化，給出各種優(yōu)化建議，能夠降低整個系統(tǒng)的使用成本，真正做到高效、節(jié)能、安全、省心、省錢。