總體框架

在智慧城市海量數(shù)據(jù)的背景下，以新型智慧城市信息化系統(tǒng)中間件為核心設(shè)計(jì)理念，以不同維度為客戶提供量身定制的產(chǎn)品為原則，科學(xué)梳理不同部門的圖像及數(shù)據(jù)監(jiān)管需求并將其納入數(shù)據(jù)中心集中管理，通過小v(大數(shù)據(jù)平臺)創(chuàng)新的大數(shù)據(jù)分析處理技術(shù)，對這些數(shù)據(jù)進(jìn)行分析、挖掘、提煉，從各種海量的數(shù)據(jù)中成長出各式各樣的業(yè)務(wù)，進(jìn)而為新型智慧城市建設(shè)提供多源信息采集、海量數(shù)據(jù)匯聚、智能分析處理、大數(shù)據(jù)深度挖掘、城市態(tài)勢展報(bào)、惠民信息等多樣化服務(wù)，創(chuàng)建城市管理社會(huì)服務(wù)新模式，從而實(shí)現(xiàn)新型智慧城市的核心價(jià)值。

小v大數(shù)據(jù)引擎

而小v大數(shù)據(jù)引擎，是利用開源大數(shù)據(jù)平臺，為智慧城市提供一個(gè)可橫向擴(kuò)充的、高性能的大數(shù)據(jù)管理平臺，其主要功能包括各種數(shù)據(jù)提供快速的提供秒級查詢與統(tǒng)計(jì)(OLAP)、實(shí)時(shí)模型對比、預(yù)測預(yù)警、定時(shí)離線分析、數(shù)據(jù)清洗與重塑等功能。

系統(tǒng)亮點(diǎn)特色

1、系統(tǒng)能力的橫向擴(kuò)充，一個(gè)智慧城市物聯(lián)網(wǎng)管理環(huán)節(jié)在剛開始搭建的時(shí)候，收集到的數(shù)據(jù)量并不是很大，但隨著時(shí)間的推移，采集到各式各樣的數(shù)據(jù)會(huì)隨著時(shí)間堆積，系統(tǒng)會(huì)隨著數(shù)據(jù)的增加在存儲(chǔ)空間、統(tǒng)計(jì)報(bào)表、數(shù)據(jù)檢索、離線分析方面會(huì)變的越來越慢，到最后物理網(wǎng)經(jīng)營者或系統(tǒng)管理者，不能不選擇放棄系統(tǒng)所采集到的有價(jià)值的數(shù)據(jù)，而這些數(shù)據(jù)都蘊(yùn)含著各種各樣的價(jià)值。小V大數(shù)據(jù)引擎它兼顧Hadoop-Spark大數(shù)據(jù)系統(tǒng)所有特征，提供性能與存儲(chǔ)的1+N的橫向擴(kuò)充，也就是隨著時(shí)間的推移數(shù)據(jù)的累積，當(dāng)單臺小V大數(shù)據(jù)引擎不能滿足性能與存儲(chǔ)要求，可以通過增加數(shù)據(jù)節(jié)點(diǎn)，是系統(tǒng)能力得到線性的增加。

2、去中心化軟件系統(tǒng)，去中心化是使系統(tǒng)穩(wěn)定性，每個(gè)節(jié)點(diǎn)都是一個(gè)完整的大數(shù)據(jù)系統(tǒng)，多個(gè)節(jié)點(diǎn)互相連接組成一個(gè)性能更高的大數(shù)據(jù)集群。當(dāng)大數(shù)據(jù)集群中某個(gè)節(jié)點(diǎn)出現(xiàn)故障時(shí)，不會(huì)影響整個(gè)集群的穩(wěn)定性。

3、數(shù)據(jù)安全性，采集到的數(shù)據(jù)一旦進(jìn)入大數(shù)據(jù)系統(tǒng)就很難丟失。數(shù)據(jù)被按照數(shù)據(jù)塊備份多份分布在不同的數(shù)據(jù)節(jié)點(diǎn)中，而一個(gè)節(jié)點(diǎn)的故障不會(huì)影響整個(gè)系統(tǒng)，當(dāng)這個(gè)節(jié)點(diǎn)恢復(fù)時(shí)，這個(gè)節(jié)點(diǎn)的數(shù)據(jù)也會(huì)被修復(fù)。

4、適合于海量數(shù)據(jù)的處理與分析，系統(tǒng)就是為海量數(shù)據(jù)處理而設(shè)計(jì)的，小V大數(shù)據(jù)引擎可高速的對海量數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，數(shù)據(jù)搜尋秒級響應(yīng)，實(shí)時(shí)模型對比、預(yù)測預(yù)警、定時(shí)離線分析、數(shù)據(jù)清洗與重塑等功能，能夠?qū)崿F(xiàn)數(shù)據(jù)的價(jià)值轉(zhuǎn)換。

5、使用靈活，小V大數(shù)據(jù)引擎提供統(tǒng)一方便的SDK，方便于基礎(chǔ)到多個(gè)系統(tǒng)中�？筛鶕�(jù)用戶與物聯(lián)網(wǎng)系統(tǒng)經(jīng)營者的需求，根據(jù)所采集的數(shù)據(jù)，做離線分析、機(jī)器學(xué)習(xí)，對整個(gè)物聯(lián)網(wǎng)IoT進(jìn)行不斷地優(yōu)化，給出各種優(yōu)化建議，能夠降低整個(gè)系統(tǒng)的使用成本，真正做到高效、節(jié)能、安全、省心、省錢。