強大集群組網(wǎng)能力
宇視大數(shù)據(jù)管理系統(tǒng)是一個貫穿整個數(shù)據(jù)處理層面(包括數(shù)據(jù)采集、數(shù)據(jù)應(yīng)用服務(wù)、數(shù)據(jù)可視化)的整體解決方案,整體方案基于Uniview DB9500(Data Base Server)數(shù)據(jù)庫服務(wù)器(下文簡稱 DB9500)和Uniview DR9500 (Data Retrieval Server) 數(shù)據(jù)檢索服務(wù)器(下文簡稱 DR9500)共同實現(xiàn)的大數(shù)據(jù)分析應(yīng)用。該服務(wù)器為2U架構(gòu),采用支持負載均衡的千兆自適應(yīng)網(wǎng)絡(luò)組網(wǎng)。DB9500單機提供10億數(shù)據(jù)存儲與計算服務(wù),DR9500單機提供高達10億條信息的數(shù)據(jù)檢索服務(wù),可單機使用;不過在大數(shù)據(jù)處理應(yīng)用中,同時為了配合用戶不同的項目規(guī)模大小,宇視科技提供不同的大數(shù)據(jù)服務(wù)設(shè)備,充分滿足不同用戶的需求;在智慧城市項目規(guī)模中,百億、千億級數(shù)據(jù)量規(guī)模,可選用集群方案,支持滿足高達千億級數(shù)據(jù)的管理應(yīng)用。
宇視大數(shù)據(jù)服務(wù)集群又分為檢索服務(wù)器集群和數(shù)據(jù)庫服務(wù)器集群:
檢索服務(wù)器集群:提供有兩臺檢索服務(wù)器管理節(jié)點,其中一臺為主用,一臺為備用,以備主用服務(wù)器出現(xiàn)問題時,備用服務(wù)器將無縫接管。在管理服務(wù)器的下層,則為檢索運算服務(wù)器節(jié)點,負責數(shù)據(jù)檢索用,檢索運算服務(wù)器節(jié)點之間支持負載均衡功能,當指定服務(wù)器數(shù)據(jù)處理任務(wù)繁重時,空閑服務(wù)器將會接替部分數(shù)據(jù)的處理;同時還支持冗余災(zāi)備設(shè)計,當某臺或多臺檢索運算服務(wù)器出現(xiàn)故障時,其他正常服務(wù)器將接管故障服務(wù)器的工作。由此可見,宇視科技的檢索服務(wù)器集群設(shè)計了完善的冗余災(zāi)備功能,且具有很強的數(shù)據(jù)檢索能力;
數(shù)據(jù)庫服務(wù)器集群:主要用于數(shù)據(jù)存儲和計算,與檢索節(jié)點集群的設(shè)計架構(gòu)一樣,同樣設(shè)計了兩臺互為冗余災(zāi)備的管理節(jié)點,多臺支持冗余災(zāi)備和負載均衡的數(shù)據(jù)節(jié)點(集群)。
宇視大數(shù)據(jù)管理平臺的服務(wù)器集群為分布式運算形式布建,且檢索集群和數(shù)據(jù)庫集群的主從式架構(gòu)均支持1(管理節(jié)點): 1000(數(shù)據(jù)節(jié)點)的強大管理功能,能滿足當前智能交通、平安城市的海量數(shù)據(jù)檢索需求。當處理數(shù)據(jù)量小于30億時,管理節(jié)點和數(shù)據(jù)節(jié)點將可以合并到同一臺服務(wù)器中,以應(yīng)對中小片區(qū)的數(shù)據(jù)管理和檢索需求。
云架構(gòu)+搜索引擎頂級設(shè)計
宇視科技基于DB9500/DR9500的大數(shù)據(jù)管理平臺使用Hadoop技術(shù)構(gòu)建數(shù)據(jù)存儲集群,使得計算和存儲一體化;通過搜索引擎技術(shù)實現(xiàn)數(shù)字、文本信息等的快速檢索功能。其采用資源層、數(shù)據(jù)應(yīng)用服務(wù)(含數(shù)據(jù)存儲和數(shù)據(jù)計算)、業(yè)務(wù)應(yīng)用三層架構(gòu),將接入的原始數(shù)據(jù)進行結(jié)構(gòu)化處理,通過云存儲和云計算技術(shù)支撐構(gòu)建能高效、精準處理的數(shù)據(jù)庫,完成數(shù)據(jù)的抽象與關(guān)聯(lián),實現(xiàn)數(shù)據(jù)應(yīng)用服務(wù)和數(shù)據(jù)的可視化管理,從而滿足不同行業(yè)業(yè)務(wù)應(yīng)用需求。該大數(shù)據(jù)解決方案具有四大特點:
一是海量數(shù)據(jù)結(jié)構(gòu)化存儲:提供高可靠性、高容錯性、高準確性、高效處理性的海量數(shù)據(jù)結(jié)構(gòu)化存儲解決方案,支持無縫容量擴展;
二是海量數(shù)據(jù)的高精準檢索:結(jié)合Hadoop架構(gòu)和安防數(shù)據(jù)特征,宇視科技創(chuàng)新推出時空數(shù)據(jù)庫,具備比通用 Hadoop 更快的檢索和計算能力,支持百億記錄的秒級高速查詢;
三是海量數(shù)據(jù)分布式計算:支持批量計算、內(nèi)存迭代計算、流式計算等多種分布式計算框架,結(jié)合行業(yè)數(shù)據(jù)特征的定制優(yōu)化,大幅提升處理性能;
四是數(shù)據(jù)增值應(yīng)用:基于基本的數(shù)據(jù)分析和檢索,實現(xiàn)數(shù)據(jù)可視化管理、可視化檢索;并由此推出全景布控、系統(tǒng)性/規(guī)律性綜合分析、事件關(guān)聯(lián)性判斷、事態(tài)發(fā)展預(yù)測等上層應(yīng)用,實現(xiàn)深層次智能管理需求。
極速優(yōu)化:秒級檢索,精準分析
宇視科技基于DB9500/DR9500的大數(shù)據(jù)管理平臺開發(fā)了多種大數(shù)據(jù)模型,率先突破百億數(shù)據(jù)型檢,可實現(xiàn)案件管理、警情管理、快速車輛查詢、快速車輛研判、車輛布控管理(如黑白紅名單過濾、占用公交車道布控、模糊車牌布控等,支持布控時間段設(shè)定)、流量統(tǒng)計(可根據(jù)卡口、車道、時間等條件篩選)、積分模型等大數(shù)據(jù)應(yīng)用功能,另可與回放、電視墻、數(shù)字矩陣、地圖、違法處罰、告警、錄像鎖定等功能模塊聯(lián)動。適用于公安、交通、司法、能源、文教等行業(yè)的超大容量數(shù)據(jù)存儲及分析業(yè)務(wù)需求,并針對不同行業(yè)提供定制化優(yōu)化服務(wù),以公安行業(yè)應(yīng)用為例介紹,其在提供精確查詢、布爾查詢、模糊查詢等多種檢索模式下,植入了近實時索引、時間過濾/排序優(yōu)化及其它用戶個性化定制功能(如相似車牌檢索、公安行業(yè)專用術(shù)語詞庫、多組織勾選等)。
測試所引用數(shù)據(jù)來自宇視科技丹東項目,數(shù)據(jù)容量>50億,本次在快速車輛查詢模塊中執(zhí)行的卡口機動車、外地機動車、區(qū)間機動車、違法等條件查詢(細分篩選條件類型多樣,如車速、車牌號、車色等,并可定義車牌前綴,加快檢索速度),所需時間均在1s以內(nèi)完成,處理速度非??臁Σ樵兊降挠涗?,還可進行過車處理(如車牌未能正確識別,可關(guān)聯(lián)到對應(yīng)圖片或錄像后手動修正)、關(guān)聯(lián)案件、查看軌跡操作。
在平臺的快速車輛研判模塊中,提供有套牌、跟車關(guān)聯(lián)、車輛頻度、車輛軌跡碰撞、晝伏夜出、頻繁夜出、高危時段、多次進城不出城、首次進城等應(yīng)用分析,可解決車輛行為異常、犯罪分子踩點、違法犯罪軌跡、潛在犯罪行為、交通違規(guī)、案件偵破線索等公安刑偵大數(shù)據(jù)分析需求,以及失物尋回等民生需求。在本模塊中,基于>50億數(shù)據(jù)庫,所有實操檢索所需時間亦在1s以內(nèi)快速完成。據(jù)介紹,該平臺在丹東運行不到2年的時間里,橫掃套牌不法行為,實現(xiàn)了0套牌管理。
除了特定類型研判,平臺還提供有車輛積分模型分析功能,通過自定義積分內(nèi)容及分值,當設(shè)定行為達到設(shè)定分值時,將會自動鎖定目標或告警;或是便于研究員對不同積分內(nèi)容在不同時間段、不同區(qū)域、不同角色等條件下的數(shù)據(jù)分析及研判,以為道路規(guī)劃、交通壓力、警力布控等綜合城市規(guī)劃建設(shè)提供有價值的參考意見。
精準而快速的檢索
?精準而快速的檢索
?精準而快速的檢索
?精準而快速的檢索
產(chǎn)品特色
1、服務(wù)器集群組網(wǎng)能力強;
2、容量巨大,支持千億級大數(shù)據(jù)檢索;
3、極速檢索:百億級數(shù)據(jù)秒級檢索,處理速度快而準;
4、功能豐富:提供有檢索、研判、布控、處警等功能模塊,且各模塊聯(lián)動性強;
5、提供大數(shù)據(jù)研判功能,深度、全局分析行為關(guān)聯(lián)性、潛在危害、事件發(fā)展態(tài)勢等,并可為城市建設(shè)決策提供數(shù)據(jù)參考依據(jù);
6、行業(yè)滲透性高:所有檢索及研判,有豐富的篩選條件,有效提高檢索的精度和效率;
7、實用性強:針對平安城市現(xiàn)存問題和潛在問題開發(fā)。
專家觀點
宇視科技的大數(shù)據(jù)平臺充分發(fā)揮了其IT背景的技術(shù)實力,具有海量數(shù)據(jù)處理快速、檢索精準、研判深入、功能豐富等特點,全局分析、管理及布控能力強,是智慧城市發(fā)展的強有力工具。
提升空間
智慧城市數(shù)據(jù)類型及應(yīng)用方向復(fù)雜,該方案可在多數(shù)據(jù)應(yīng)用提升價值,擴展支持各類數(shù)據(jù)的應(yīng)用研判,用以滿足復(fù)雜的智慧城市管理。