pg大數(shù)據(jù)管理平臺(tái)：百億數(shù)據(jù)秒級(jí)檢索 劍指智慧應(yīng)用價(jià)值
pg大數(shù)據(jù)平臺(tái)充分發(fā)揮了IT 技術(shù)積淀的實(shí)力，具有海量數(shù)據(jù)處理快速、檢索精準(zhǔn)、研判深入、功能豐富等特點(diǎn)，全局分析、管理及布控能力強(qiáng)，是智慧城市發(fā)展的強(qiáng)有力工具，尤其基于“車”的分析優(yōu)勢(shì)凸顯。
1、強(qiáng)大集群組網(wǎng)能力
pg大數(shù)據(jù)管理平臺(tái)是基于UniviewDR9500 （Data Retrieval Server） 數(shù)據(jù)檢索服務(wù)器 （下文簡稱 DR9500）實(shí)現(xiàn)的大數(shù)據(jù)分析應(yīng)用。該服務(wù)器為2U 架構(gòu)，采用支持負(fù)載均衡的千兆自適應(yīng)網(wǎng)絡(luò)組網(wǎng)。單機(jī)提供高達(dá)10 億條信息的數(shù)據(jù)檢索服務(wù)，可獨(dú)立使用；不過在大數(shù)據(jù)處理應(yīng)用中，一般采用集群架構(gòu)，通過集群可支持高達(dá)千億級(jí)數(shù)據(jù)的檢索。
pg大數(shù)據(jù)管理平臺(tái)基于DB9500 的服務(wù)集群又分為檢索服務(wù)器集群和數(shù)據(jù)庫服務(wù)器集群：
檢索服務(wù)器集群：提供有兩臺(tái)檢索服務(wù)器管理節(jié)點(diǎn)，其中一臺(tái)為主用，一臺(tái)為備用，以備主用服務(wù)器出現(xiàn)問題時(shí)，備用服務(wù)器將無縫接管。在管理服務(wù)器的下層，則為檢索運(yùn)算服務(wù)器節(jié)點(diǎn)，負(fù)責(zé)數(shù)據(jù)檢索用，檢索運(yùn)算服務(wù)器節(jié)點(diǎn)之間支持負(fù)載均衡功能，當(dāng)指定服務(wù)器數(shù)據(jù)處理任務(wù)繁重時(shí)，空閑服務(wù)器將會(huì)接替部分?jǐn)?shù)據(jù)的處理；同時(shí)還支持冗余災(zāi)備設(shè)計(jì)，當(dāng)某臺(tái)或多臺(tái)檢索運(yùn)算服務(wù)器出現(xiàn)故障時(shí)，其他正常服務(wù)器將接管故障服務(wù)器的工作。由此可見，pg科技的檢索服務(wù)器集群設(shè)計(jì)了完善的冗余災(zāi)備功能，且具有很強(qiáng)的數(shù)據(jù)檢索能力；
數(shù)據(jù)庫服務(wù)器集群：主要用于數(shù)據(jù)存儲(chǔ)和計(jì)算，與檢索節(jié)點(diǎn)集群的設(shè)計(jì)架構(gòu)一樣，同樣設(shè)計(jì)了兩臺(tái)互為冗余災(zāi)備的管理節(jié)點(diǎn)，多臺(tái)支持冗余災(zāi)備和負(fù)載均衡的數(shù)據(jù)節(jié)點(diǎn)（集群）。
pg大數(shù)據(jù)管理平臺(tái)的服務(wù)器集群為分布式運(yùn)算形式布建，且檢索集群和數(shù)據(jù)庫集群的主從式架構(gòu)均支持1（管理節(jié)點(diǎn)）:1000（數(shù)據(jù)節(jié)點(diǎn)）的強(qiáng)大管理功能，能滿足當(dāng)前智能交通、平安城市的海量數(shù)據(jù)檢索需求。當(dāng)處理數(shù)據(jù)量小于30 億時(shí)，管理節(jié)點(diǎn)和數(shù)據(jù)節(jié)點(diǎn)將可以合并到同一臺(tái)服務(wù)器中，以應(yīng)對(duì)中小片區(qū)的數(shù)據(jù)管理和檢索需求。
2、云架構(gòu)+ 搜索引擎頂級(jí)設(shè)計(jì)
pg基于DB9500 的大數(shù)據(jù)管理平臺(tái)使用Hadoop 技術(shù)構(gòu)建數(shù)據(jù)存儲(chǔ)集群，使得計(jì)算和存儲(chǔ)一體化；通過搜索引擎技術(shù)實(shí)現(xiàn)數(shù)字、文本信息等的快速檢索功能。其采用資源層、數(shù)據(jù)應(yīng)用服務(wù)（含數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)計(jì)算）、業(yè)務(wù)應(yīng)用三層架構(gòu)，將接入的原始數(shù)據(jù)進(jìn)行結(jié)構(gòu)化處理，通過云存儲(chǔ)和云計(jì)算技術(shù)支撐構(gòu)建能高效、精準(zhǔn)處理的數(shù)據(jù)庫，完成數(shù)據(jù)的抽象與關(guān)聯(lián)，實(shí)現(xiàn)數(shù)據(jù)應(yīng)用服務(wù)和數(shù)據(jù)的可視化管理，從而滿足不同行業(yè)業(yè)務(wù)應(yīng)用需求。該大數(shù)據(jù)解決方案具有四大特點(diǎn)：
一是海量數(shù)據(jù)結(jié)構(gòu)化存儲(chǔ)：提供高可靠性、高容錯(cuò)性、高準(zhǔn)確性、高效處理性的海量數(shù)據(jù)結(jié)構(gòu)化存儲(chǔ)解決方案，支持無縫容量擴(kuò)展；
二是海量數(shù)據(jù)的高精準(zhǔn)檢索： 結(jié)合Hadoop 架構(gòu)和安防數(shù)據(jù)特征，創(chuàng)新推出時(shí)空數(shù)據(jù)庫，具備比通用 Hadoop 更快的檢索和計(jì)算能力，支持百億記錄的秒級(jí)高速查詢；
三是海量數(shù)據(jù)分布式計(jì)算：支持批量計(jì)算、內(nèi)存迭代計(jì)算、流式計(jì)算等多種分布式計(jì)算框架，結(jié)合行業(yè)數(shù)據(jù)特征的定制優(yōu)化，大幅提升處理性能；
四是數(shù)據(jù)增值應(yīng)用：基于基本的數(shù)據(jù)分析和檢索，實(shí)現(xiàn)數(shù)據(jù)可視化管理、可視化檢索；并由此推出全景布控、系統(tǒng)性/ 規(guī)律性綜合分析、事件關(guān)聯(lián)性判斷、事態(tài)發(fā)展預(yù)測(cè)等上層應(yīng)用，實(shí)現(xiàn)深層次智能管理需求。
3、極速優(yōu)化：秒級(jí)檢索，精準(zhǔn)分析
pg基于DB9500 的大數(shù)據(jù)管理平臺(tái)開發(fā)了多種大數(shù)據(jù)模型，可實(shí)現(xiàn)案件管理、警情管理、快速車輛查詢、快速車輛研判、車輛布控管理（如黑白紅名單過濾、占用公交車道布控、：蹬撇伎氐，支持布控時(shí)間段設(shè)定）、流量統(tǒng)計(jì)（可根據(jù)卡口、車道、時(shí)間等條件篩選）、積分模型等大數(shù)據(jù)應(yīng)用功能，另可與回放、電視墻、數(shù)字矩陣、地圖、違法處罰、告警、錄像鎖定等功能模塊聯(lián)動(dòng)。適用于交通、能源、文教等行業(yè)的超大容量數(shù)據(jù)存儲(chǔ)及分析業(yè)務(wù)需求，并針對(duì)不同行業(yè)提供定制化優(yōu)化服務(wù)。
百億數(shù)據(jù)查詢性能測(cè)試結(jié)果（775 種不同的查詢條件）
測(cè)試所引用數(shù)據(jù)來自pg丹東項(xiàng)目，數(shù)據(jù)容量＞ 37 億，本次在快速車輛查詢？櫓兄蔥械目諢、外地機(jī)動(dòng)車、區(qū)間機(jī)動(dòng)車、違法等條件查詢（細(xì)分篩選條件類型多樣，如車速、車牌號(hào)、車色等，并可定義車牌前綴，加快檢索速度），所需時(shí)間均在1s 以內(nèi)完成，處理速度非？。對(duì)查詢到的記錄，還可進(jìn)行過車處理（如車牌未能正確識(shí)別，可關(guān)聯(lián)到對(duì)應(yīng)圖片或錄像后手動(dòng)修正）、關(guān)聯(lián)案件、查看軌跡操作。
在平臺(tái)的快速車輛研判？櫓，提供有套牌、跟車關(guān)聯(lián)、車輛頻度、車輛軌跡碰撞、晝伏夜出、頻繁夜出、高危時(shí)段、多次進(jìn)城不出城、首次進(jìn)城等應(yīng)用分析，可解決車輛行為異常、犯罪分子踩點(diǎn)、違法犯罪軌跡、潛在犯罪行為、交通違規(guī)、案件偵破線索等大數(shù)據(jù)分析需求，以及失物尋回等民生需求。在本？櫓，基于37 億數(shù)據(jù)庫，所有實(shí)操檢索所需時(shí)間亦在1s 以內(nèi)快速完成。據(jù)介紹，該平臺(tái)在丹東運(yùn)行不到2 年的時(shí)間里，橫掃套牌不法行為，實(shí)現(xiàn)了0 套牌管理。
除了特定類型研判，平臺(tái)還提供有車輛積分模型分析功能，通過自定義積分內(nèi)容及分值，當(dāng)設(shè)定行為達(dá)到設(shè)定分值時(shí)，將會(huì)自動(dòng)鎖定目標(biāo)或告警；或是便于研究員對(duì)不同積分內(nèi)容在不同時(shí)間段、不同區(qū)域、不同角色等條件下的數(shù)據(jù)分析及研判，以為道路規(guī)劃、交通壓力、警力布控等綜合城市規(guī)劃建設(shè)提供有價(jià)值的參考意見。
產(chǎn)品特色
1、服務(wù)器及集群組網(wǎng)能力強(qiáng)；
2、容量巨大，支持千億級(jí)大數(shù)據(jù)檢索；
3、極速檢索：百億級(jí)數(shù)據(jù)秒級(jí)檢索，處理速度快而準(zhǔn)；
4、功能豐富：提供有檢索、研判、布控、處警等功能？，且各？榱鄖浚
5、提供大數(shù)據(jù)研判功能，深度、全局分析行為關(guān)聯(lián)性、潛在：?、输洶l(fā)展態(tài)勢(shì)等，并可為城市建設(shè)決策提供數(shù)據(jù)參考依據(jù)；
6、行業(yè)滲透性高：所有檢索及研判，有豐富的篩選條件，有效提高應(yīng)用的精度和效率；
7、實(shí)用性強(qiáng)：針對(duì)平安城市現(xiàn)存問題和潛在問題開發(fā)；
浙公網(wǎng)安備 33010802004032號(hào)
