智慧消防數據采集-智慧消防數據中心系統建設方案
通過(guò)消防大數據平臺,為企業(yè)事業(yè)單位和個(gè)人提供火災危險通報、火災通報、業(yè)務(wù)處理、信息查詢(xún)、知識技能學(xué)習等方便高效的服務(wù)。提供更強大的數據基礎,破解信息化發(fā)展瓶頸,與大數據相關(guān)的物聯(lián)網(wǎng)技術(shù)、云計算技術(shù),能夠迅速進(jìn)行各種數據的全面收集和傳輸,不是單一的,而是基于完整的數據圖譜分析。
1.1 數據中心設計
數據中心以浪潮、華為等國有自主核心技術(shù)為基礎建設,包括機房裝修、網(wǎng)絡(luò )的部署、設施設備的安裝調試等。有條件的地方,建議采用租用政府云計算中心的方式建設。
1.1.1 基礎環(huán)境系統建設方案
本項目數據中心以浪潮、華為等國有自主核心技術(shù)為基礎建設,包括機房裝修、網(wǎng)絡(luò )的部署、設施設備的安裝調試等。有條件的地方也可租用政府云計算中心資源,機房基礎環(huán)境及所需的網(wǎng)絡(luò )安全、計算資源和存儲資源由其負責。
1.1.2 數據庫系統建設方案
“中心智慧消防”數據庫(以下簡(jiǎn)稱(chēng)“數據庫”)用于梳理消防相關(guān)各種數據資源,為消防業(yè)務(wù)提供基礎數據服務(wù)。數據庫設計是否合理,對本系統各個(gè)應用起極其重要作用,數據庫的建設不是一朝一夕可以完成,是循序漸進(jìn)的過(guò)程,涉及的數據不可能一次性獲得,是分批分次的進(jìn)行,本項目建設數據庫過(guò)程將遵循“統籌規則、分期實(shí)施”的原則展開(kāi)。
1.1.2.1 基礎數據庫建設
本項目主要完成機構(單位)信息基礎數據庫、人員信息基礎數據庫、物品信息基礎數據庫、事件信息基礎數據庫、地理信息基礎數據庫、其他信息基礎數據庫等六類(lèi)。
(1)總體設計
本項目基于分布式存儲技術(shù)建設基礎數據庫;
本項目提供統一的數據標準體系來(lái)構成基礎數據庫,各單位接入數據;
提供基于數據交換與共享系統之上的基礎數據庫建設,采用統一的用戶(hù)登錄、申請授權、安全認證,保證數據的規范性和安全性;
提供數據的權威性、正確性和可用性的基礎數據庫;
提供統一的數據管理規范,保證數據發(fā)布、共享、質(zhì)量的可監控、可追溯;
提供基于消防基礎數據庫的GIS地圖完美結合,對機構(單位)情況、人員情況、消防業(yè)務(wù)情況等統計分析等信息的展示;
提供相關(guān)的消防數據檔案,有效的顯示消防的相關(guān)基本信息內容。
(2)基礎數據庫管理
l 信息歸集
數據編目:依托信息資源目錄,提供對消防安全各管理部門(mén)有關(guān)消防相關(guān)信息,建立、發(fā)布和維護人員登記、許可審批信息資源目錄結構,各單位編目、注冊,相關(guān)使用部門(mén)檢索使用。
數據交換:通過(guò)統一的消防資源目錄分類(lèi)從較高層次的系統架構于內容格局上解決信息兼容問(wèn)題,從根本上消除“信息孤島”。通過(guò)本項目建設的信息資源目錄,為消防相關(guān)信息共享、數據交換、資源整合提供基礎。
數據橋接:提供擴展性良好的數據抽取、清洗、關(guān)聯(lián)模型,實(shí)現數據有序地加載到基礎庫數據庫中,建立數據處理規范、外部數據源管理、元數據管理平臺、數據處理系統、數據監控等服務(wù)。
l 數據查詢(xún)與服務(wù)
歸集數據查詢(xún):提供可通過(guò)多種方式進(jìn)行消防相關(guān)信息歸集數據的查詢(xún)??砂床煌馁Y源目錄分類(lèi)查詢(xún)相關(guān)數據。通過(guò)不同的目錄、組合條件查詢(xún)數據項和相關(guān)詳細信息。
綜合查詢(xún):實(shí)現對消防相關(guān)信息數據的查詢(xún)檢索應用,利用綜合查詢(xún)?yōu)橄罉I(yè)務(wù)提供對基礎數據的多種查詢(xún)檢索服務(wù),包括組合查詢(xún)、關(guān)聯(lián)查詢(xún)、主題庫查詢(xún)等。
接口服務(wù):基于開(kāi)放式標準規范體系,通過(guò)主流技術(shù),在不需要平臺供應商的支持下實(shí)現無(wú)障礙的數據接入。
l 數據共享與使用
提供按照統一的數據標準提供相應的數據共享;提供可根據數據交換與共享系統訂閱相關(guān)數據的功能;提供通過(guò)相應服務(wù)接口獲取相關(guān)數據的功能。
l 數據統計及決策
統計分析:建立統計分析功能,能夠按照工作人員的要求將統計結果直觀(guān)的提供出來(lái),并可將統計結果生成各類(lèi)圖形,并重點(diǎn)提供對消防相關(guān)數據的“動(dòng)態(tài)監測”功能??梢愿鶕ぷ魅藛T的要求快速、靈活地進(jìn)行大數據量的查詢(xún)處理和匯總統計。具備報表生成功能,可按一定規則生成報表。能夠直觀(guān)易懂將查詢(xún)結果提供給工作人員,以便他們能準確掌握消防相關(guān)狀況。支持各類(lèi)統計圖形的生成,如:可生成柱狀圖、曲線(xiàn)圖、餅圖等。提供對匯總數據的綜合分析功能,能夠多種復雜的分析操作。
決策支撐:利用消防相關(guān)信息進(jìn)行多類(lèi)型、多層面的分析研究,建立固定的分析模型。以表格、統計圖和專(zhuān)題等表現形式為載體展現和分析數據。
l 數據安全與管理
提供統一用戶(hù)和權限驗證服務(wù),實(shí)現統一和批量的授權操作;提供安全的用戶(hù)登錄,保證登錄的安全性;提供共享和傳輸數據的統一加密,保證數據的安全性;提供統一日志記錄、查詢(xún)等服務(wù),使管理員了解系統目前的狀態(tài)。
1.1.2.2 業(yè)務(wù)數據庫建設
消防業(yè)務(wù)數據庫是基于消防基礎數據庫的業(yè)務(wù)性擴展數據庫。消防業(yè)務(wù)數據由根據消防業(yè)務(wù)應用需要而擴展的各類(lèi)指標項構成,是一種動(dòng)態(tài)的、不斷擴充的業(yè)務(wù)數據模式,是消防數據的“目”,指標項來(lái)自各類(lèi)消防智慧應用的建設。
1.1.2.3 主題數據庫建設
主題數據庫由各類(lèi)專(zhuān)題應用類(lèi)數據庫構成。主題數據是通過(guò)對基礎數據、業(yè)務(wù)數據進(jìn)行清洗、挖掘、分析后形成的有特定應用場(chǎng)景的服務(wù)型數據集,為各應用部門(mén)提供融合后的專(zhuān)題應用資源服務(wù)。
主題數據庫主要是消防安全各管理部門(mén)的專(zhuān)屬數據庫,該數據庫是共享的基礎數據庫的主要數據來(lái)源。對該數據庫的存取必須擁有相關(guān)的權限,并通過(guò)用戶(hù)認證?;凇爸腔巯馈痹茢祿?,自定義分析主題,開(kāi)展輔助決策功能。
1.1.3 數據接口及服務(wù)建設方案
(1)開(kāi)發(fā)接口服務(wù)
本系統提供開(kāi)發(fā)接口服務(wù),支持開(kāi)發(fā)者或應用開(kāi)發(fā)商調用系統提供的服務(wù)和自己的業(yè)務(wù)應用進(jìn)行集成,或是開(kāi)發(fā)基于“智慧消防應用平臺的應用系統?!爸腔巯馈睉闷脚_提供二次開(kāi)發(fā)包、webservices開(kāi)發(fā)接口,以滿(mǎn)足不同的開(kāi)發(fā)用戶(hù)需要。
(2)數據服務(wù)系統
數據服務(wù)系統的服務(wù)內容為基礎數據、業(yè)務(wù)數據和主題數據。系統提供服務(wù)申請、審核、使用等管理功能和服務(wù)注冊、上架、撤銷(xiāo)等維護功能。通過(guò)建立數據服務(wù)系統,將達成以下目標:
建立嚴格的數據服務(wù)管理,數據的使用必須遵循申請~審核~使用的管理流程;
提供數據服務(wù)本身的注冊、上架、撤銷(xiāo)等服務(wù)維護功能,支持服務(wù)的動(dòng)態(tài)配置;
數據服務(wù)須提供動(dòng)態(tài)擴展能力,能支持大用戶(hù)量并發(fā)訪(fǎng)問(wèn)。
(3)動(dòng)態(tài)擴展服務(wù)
l 時(shí)空信息承載服務(wù)
實(shí)現具備時(shí)間、空間特性的公共數據庫數據的可視化展示和管理,通過(guò)與3S 技術(shù)(GPS、GIS、RS)結合,可以構建各種時(shí)空可視化的信息系統。同時(shí),基于業(yè)務(wù)數據的信息資源圖層也可以通過(guò)服務(wù)的時(shí)空化接口功能來(lái)進(jìn)行快速制作,從而大大降低了信息資源圖層更新的成本和復雜度。
l 專(zhuān)題數據挖掘服務(wù)
功能主要分為多維數據透視和信息綜合挖掘,系統的數據來(lái)源為基礎數據庫與業(yè)務(wù)數據庫,系統產(chǎn)生的分析成果數據以主題數據形式存儲于主題數據庫。
1.2 監控中心設計
監控中心用于實(shí)現對轄區消防安全遠程集中監督,管理坐席、監管電腦及網(wǎng)絡(luò )構成。監控人員通過(guò)監管電腦瀏覽器遠程登入數據中心系統,進(jìn)行轄區消防安全監督管理,把控轄區消防安全態(tài)勢。對發(fā)生異常的消防設施和未履行消防安全管理工作的單位和人員,立刻告之并敦促整改,促使各級部門(mén)和人員落實(shí)消防安全責任。
1.3 應用支撐系統設計
應用支撐系統是面向Java技術(shù)的開(kāi)發(fā)平臺,應無(wú)縫支持主流的商業(yè)中間件產(chǎn)品,包括Websphere、Weblogic、TongWeb、Apachi Tomcat、GIS等,這樣將為用戶(hù)選擇合適的應用中間件提供自由的空間。
1.3.1 服務(wù)構件
服務(wù)構件層提供了若干個(gè)基礎服務(wù)構件,包括SOA服務(wù)調度、物聯(lián)應用服務(wù)、流程協(xié)同服務(wù)、移動(dòng)應用服務(wù)、通用視頻服務(wù)、通用數據服務(wù)、運維應用服務(wù)、管理應用服務(wù)、分析決策服務(wù)、數據治理服務(wù)等構件。其主要任務(wù)是為多應用系統開(kāi)發(fā)、運行管理提供基礎資源配置、組織機構及用戶(hù)授權、數據接入與整合、數據應用以及面向服務(wù)架構的服務(wù)管理和調度。
(1)SOA服務(wù)調度:SOA本質(zhì)強調“松耦合”的架構,以服務(wù)形式進(jìn)行封裝。從應用開(kāi)發(fā)的層次看,一方面應用支撐平臺的統一授權和認證、工作流、數據應用、數據交換等服務(wù)均可以Web服務(wù)的形式進(jìn)行封裝,然后提供給應用系統調用,另一方面,面向業(yè)務(wù)的應用軟件開(kāi)發(fā)過(guò)程中,可以將共性的業(yè)務(wù)形成服務(wù)注冊到平臺中,然后通過(guò)、問(wèn)服務(wù)的方式進(jìn)行調用。
(2)物聯(lián)應用服務(wù):提供面向異構物聯(lián)網(wǎng)的協(xié)議解析及接入服務(wù)。
(3)流程協(xié)同服務(wù):提供基于工作流的業(yè)務(wù)流程的自動(dòng)化、智能化和整合化管理。
(4)移動(dòng)應用服務(wù):提供移動(dòng)應用的注冊、管理、同步等服務(wù)。
(5)通用視頻服務(wù):提供視頻流的接入、分析、管理、點(diǎn)播和錄制等服務(wù)。
(6)通用數據服務(wù):提供數據檢索、交換等通用服務(wù)。
(7)運維應用服務(wù):提供系統運行數據及應用監控的服務(wù)。
(8)管理應用服務(wù):提供基礎資源配置、組織機構及用戶(hù)授權等服務(wù)。
(9)分析決策服務(wù):提供數據統計分析服務(wù)。
1.3.2 數據可視化工具
本項目數據可視化工具采用成熟的開(kāi)源軟件Echart。
數據可視化工具可以運行在 PC 和移動(dòng)設備上,可提供各類(lèi)數據可視化圖表,包括常規的折線(xiàn)圖,柱狀圖,散點(diǎn)圖,餅圖,K線(xiàn)圖,用于統計的盒形圖,用于地理數據可視化的地圖,熱力圖,線(xiàn)圖,用于關(guān)系數據可視化的關(guān)系圖,樹(shù)形圖,多維數據可視化的平行坐標,用于 BI 的漏斗圖,儀表盤(pán)等,并支持動(dòng)態(tài)特效圖表。
1.3.3 支撐軟件
(1)操作系統
操作系統是位于硬件之上、所有其他系統軟件之下的系統軟件,使得管理系統中的各種軟件和硬件資源得以充分利用,方便用戶(hù)使用計算機系統。本項目建設操作系統與市級平臺一致,配置5套操作系統,用于智慧消防5個(gè)應用系統。
(2)虛擬化軟件
虛擬化軟件可以讓主體服務(wù)器建立與執行一至多個(gè)虛擬化環(huán)境,形成可以動(dòng)態(tài)管理的“資源池”實(shí)現IT資源的動(dòng)態(tài)分配、靈活調度、跨域共享,提高IT資源利用率。從而提高資源的利用率,簡(jiǎn)化系統管理,實(shí)現服務(wù)器整合,讓IT對業(yè)務(wù)的變化更具適應力。本項目虛擬化軟件由數據中心統一部署。
(3)數據庫軟件
根據建設需要,本項目需配置數據庫軟件1套,部署在智慧消防數據庫服務(wù)器上,用于本項目結構化業(yè)務(wù)數據的讀、寫(xiě)服務(wù)。
(4)中間件軟件
中間件軟件包括基于SOA的服務(wù)總線(xiàn)(ESB)中間件、消息中間件等。
(5)數據備份軟件
數據備份是保護數據與數據恢復的重要前提,數據備份軟件可使備份后的數據完整、快速、簡(jiǎn)捷、可靠地恢復原有系統。
1.4 數據庫設計
智慧消防數據庫(以下簡(jiǎn)稱(chēng)“數據庫”)用于梳理消防相關(guān)各種數據資源,為消防業(yè)務(wù)提供基礎數據服務(wù)。數據庫設計是否合理,對智慧消防各應用平臺起極其重要作用,數據庫的建設不是一朝一夕可以完成,是循序漸進(jìn)的過(guò)程,涉及的數據不可能一次性獲得,是分批分次的進(jìn)行,本項目建設數據庫過(guò)程將遵循“統籌規則、分期實(shí)施”的原則展開(kāi)。
1.4.1 基礎數據庫建設
本項目主要完成基礎信息庫和消防業(yè)務(wù)信息庫。
(1)總體設計
l 本項目基于分布式存儲技術(shù)建設基礎數據庫;
l 本項目提供統一的數據標準體系來(lái)構成基礎數據庫,單位接入數據;
l 提供基于資源共享交換的基礎數據庫建設,采用統一的用戶(hù)登錄、申請授權、安全認證,保證數據的規范性和安全性;
l 提供數據的權威性、正確性和可用性的基礎數據庫;
l 提供統一的數據管理規范,保證數據發(fā)布、共享、質(zhì)量的可監控、可追溯;
l 提供基于消防基礎數據庫的GIS地圖完美結合,對人員情況、單位(機構)情況、消防業(yè)務(wù)情況等統計分析等信息的展示;
l 提供相關(guān)的消防數據檔案,有效的顯示消防的相關(guān)基本信息內容。
(2)基礎數據庫管理
l 信息歸集
數據編目:依托信息資源目錄,提供對消防相關(guān)信息,建立、發(fā)布和維護人員登記、許可審批信息資源目錄結構,各單位編目、注冊,相關(guān)使用部門(mén)檢索使用。
數據交換:通過(guò)統一的消防資源目錄分類(lèi)從較高層次的系統架構于內容格局上解決信息兼容問(wèn)題,從根本上消除“信息孤島”。通過(guò)本項目建設的信息資源目錄,為消防相關(guān)信息共享、數據交換、資源整合提供基礎。
數據橋接:提供擴展性良好的數據抽取、清洗、關(guān)聯(lián)模型,實(shí)現數據有序地加載到基礎庫數據庫中,建立數據處理規范、外部數據源管理、元數據管理平臺、數據處理系統、數據監控等服務(wù)。
l 數據查詢(xún)與服務(wù)
歸集數據查詢(xún):提供可通過(guò)多種方式進(jìn)行消防相關(guān)信息歸集數據的查詢(xún)??砂床煌馁Y源目錄分類(lèi)查詢(xún)相關(guān)數據。通過(guò)不同的目錄、組合條件查詢(xún)數據項和相關(guān)詳細信息。
綜合查詢(xún):實(shí)現對消防相關(guān)信息數據的查詢(xún)檢索應用,利用綜合查詢(xún)?yōu)橄罉I(yè)務(wù)提供對基礎數據的多種查詢(xún)檢索服務(wù),包括組合查詢(xún)、關(guān)聯(lián)查詢(xún)、主題庫查詢(xún)等。
接口服務(wù):基于開(kāi)放式標準規范體系,通過(guò)主流技術(shù),在不需要平臺供應商的支持下實(shí)現無(wú)障礙的數據接入。
l 數據共享與使用
數據質(zhì)量:對于各系統提供的數據進(jìn)行質(zhì)量核查,并有相應的處理流程和結果反饋,最后形成各系統提供數據的質(zhì)量報告,并進(jìn)行統計排名和分析。
數據共享使用:提供按照統一的數據標準提供相應的數據共享;提供通過(guò)相應服務(wù)接口獲取相關(guān)數據的功能。
l 數據統計及決策
統計分析:建立統計分析功能,能夠按照工作人員的要求將統計結果直觀(guān)的提供出來(lái),并可將統計結果生成各類(lèi)圖形,并重點(diǎn)提供對消防相關(guān)數據的“動(dòng)態(tài)監測”功能??梢愿鶕ぷ魅藛T的要求快速、靈活地進(jìn)行大數據量的查詢(xún)處理和匯總統計。具備報表生成功能,可按一定規則生成報表。能夠直觀(guān)易懂將查詢(xún)結果提供給工作人員,以便他們能準確掌握消防相關(guān)狀況。支持各類(lèi)統計圖形的生成,如:可生成柱狀圖、曲線(xiàn)圖、餅圖等。提供對匯總數據的綜合分析功能,能夠多種復雜的分析操作)。
決策支撐:利用消防相關(guān)信息進(jìn)行多類(lèi)型、多層面的分析研究,建立固定的分析模型。以表格、統計圖和專(zhuān)題三種表現形式為載體展現和分析數據。
l 數據安全與管理
提供統一用戶(hù)和權限驗證服務(wù),實(shí)現統一和批量的授權操作;提供安全的用戶(hù)登錄,保證登錄的安全性;提供共享和傳輸數據的統一加密,保證數據的安全性;提供統一日志記錄、查詢(xún)等服務(wù),使管理員了解系統目前的狀態(tài)。
(3)基礎信息數據庫管理門(mén)戶(hù)
l 信息管理門(mén)戶(hù)
建立基礎信息數據庫管理門(mén)戶(hù),為消防基礎信息建立相應信息欄目,并將消防相關(guān)數據與統計分析信息在管理門(mén)戶(hù)中進(jìn)行展現。系統界面簡(jiǎn)潔美觀(guān),能夠展現主要數據信息。
l 檔案信息公示
提供消防相關(guān)信息資源數據檔案,進(jìn)行后臺配置,前臺展示的效果。
l 數據歸集排名
對消防相關(guān)接入數據進(jìn)行統計匯總,并對數據進(jìn)行排名和問(wèn)題顯示。
1.4.2 業(yè)務(wù)數據庫建設
消防業(yè)務(wù)數據庫是基于消防基礎數據庫的業(yè)務(wù)性擴展數據庫。消防業(yè)務(wù)數據由根據消防業(yè)務(wù)應用需要而擴展的各類(lèi)指標項構成,是一種動(dòng)態(tài)的、不斷擴充的業(yè)務(wù)數據模式,是消防數據的“目”,指標項來(lái)自各類(lèi)消防智慧應用的建設。
1.4.3 主題數據庫建設
主題數據庫由各類(lèi)專(zhuān)題應用類(lèi)數據庫構成。主題數據是通過(guò)對基礎數據、業(yè)務(wù)數據進(jìn)行清洗、挖掘、分析后形成的有特定應用場(chǎng)景的服務(wù)型數據集,為各應用部門(mén)提供融合后的專(zhuān)題應用資源服務(wù)。
主題數據庫主要是消防各部門(mén)的專(zhuān)屬數據庫,該數據庫是共享的基礎數據庫的主要數據來(lái)源。對該數據庫的存取必須擁有相關(guān)的權限,并通過(guò)用戶(hù)認證?;谙来髷祿?shí)戰應用平臺信息共享庫,自定義分析主題,開(kāi)展輔助決策功能。
1.5 數據處理和存儲系統設計
1.5.1 存儲系統建設
本項目的存儲系統建設采用“虛擬化分布式存儲+集中存儲”方式進(jìn)行建設。
(1)虛擬化分布式存儲
在虛擬化分布式存儲架構中,每臺服務(wù)器同時(shí)也是一個(gè)存儲節點(diǎn)。除了安裝平臺軟件的系統盤(pán)外,每個(gè)節點(diǎn)上的其他所有磁盤(pán)空間(包括系統盤(pán)的剩余分區)都能被用于虛擬化存儲。虛擬化存儲會(huì )使整個(gè)LUN盡量均勻分布在所管理的全部節點(diǎn)和物理磁盤(pán)上,這樣的設計使得對LUN的I/O操作能利用整個(gè)系統中全部節點(diǎn)和磁盤(pán)的性能。當管理員創(chuàng )建一個(gè)LUN時(shí),虛擬化存儲并不會(huì )馬上為該LUN分配實(shí)際的物理存儲空間,而是采用精簡(jiǎn)模式,在有數據寫(xiě)入的時(shí)候才分配存儲空間。精簡(jiǎn)模式使用戶(hù)在存儲空間有限時(shí),能按未來(lái)的業(yè)務(wù)發(fā)展需要提前規劃LUN的容量。本期項目配置1套分布式存儲軟件。
(2)集中存儲
本項目配置1臺光纖存儲虛擬化控制器(雙節點(diǎn))完成存儲虛擬化的控制和管理。光纖存儲虛擬化控制器具備冗余結構設計,實(shí)現鏈路層的冗余和故障容錯。
配置2臺磁盤(pán)陣列,數據容量不少于200TB,對兩臺磁盤(pán)陣列進(jìn)行虛擬化整合,構建光纖存儲資源池,以虛擬化的邏輯磁盤(pán)方式對外提供存儲服務(wù)。FC存儲柜采用高速光纖磁盤(pán),并配置RAID+HotSpare策略,保證存儲系統的高可用性。光纖存儲設備采用的是光纖鏈路上的SCSI傳輸,計算機和存儲間的光纖接口采用底層的塊協(xié)議。通過(guò)云管理平臺中的數據備份策略進(jìn)行備份事務(wù)調度。在對需要備份的數據、數據庫等根據預先配置定義好備份策略后,備份系統將自動(dòng)地按照預先設置的時(shí)間、方式將需要備份的數據備份到備份資源池中。
1.5.2 數據整合與交換系統建設
1.5.2.1 數據整合處理系統
數據整合處理系統的作用體現在兩個(gè)方面,一方面通過(guò)數據加工、數據整合、數據關(guān)聯(lián)等功能,能夠動(dòng)態(tài)配置實(shí)現各類(lèi)不同主題的信息處理,在城市公共基礎信息、管理對象信息和消防業(yè)務(wù)信息等基礎數據庫的基礎上,通過(guò)進(jìn)行清洗、轉換、集成,構建業(yè)務(wù)應用所需的業(yè)務(wù)數據庫,豐富主題數據庫,提升數據的價(jià)值,實(shí)現數據向信息的轉變;另一方面,在消防應用的建設中,支撐業(yè)務(wù)數據庫及主題數據庫的指標項擴展,這些指標項的擴展也會(huì )充實(shí)基礎數據庫的指標項及數據內容。數據整合模型如下圖所示:
數據整合模型
(1)整合配置
以圖形操作模式配置數據整合參數,實(shí)現進(jìn)行清洗、轉換、比對、數據導出、數據拆分等數據整合規則的動(dòng)態(tài)配置。
(2)整合組件管理
數據整合服務(wù)系統以組件形式對清洗、轉換、比對、導出、拆分等數據處理過(guò)程進(jìn)行封裝,同時(shí)提供這些整合組件的注冊、發(fā)布、撤銷(xiāo)、查詢(xún)等整合組件管理功能。
(3)整合流程管理
實(shí)現對整合實(shí)施過(guò)程的申請、配置、審核、執行等過(guò)程的流程化管理,并允 許在流程過(guò)程中進(jìn)行回退、修改等操作。
(4)整合結果信息查詢(xún)
提供整合結果信息的查詢(xún)統計功能,無(wú)需定制開(kāi)發(fā),可動(dòng)態(tài)根據不同的整合主題進(jìn)行相應結果信息的查詢(xún)。
(5)整合結果訂閱
可針對整合結果,按需進(jìn)行結果集數據的訂閱,在訂閱審核通過(guò)后,系統按預設的規則將接入部門(mén)要求的數據交換到指定位置。
(6)整合過(guò)程信息統計分析
動(dòng)態(tài)設定統計口徑,對數據整合過(guò)程進(jìn)行統計與分析,如清洗數據量、處理過(guò)程失敗記錄、處理成功數等。
1.5.2.2 數據交換系統
數據交換系統的作用在于實(shí)現信息資源的統一交換,通過(guò)交換實(shí)現城市公共基礎信息、管理對象信息和消防業(yè)務(wù)信息及其他等信息資源的同步更新,以及數據比對、清洗、轉換、異常處理等交換服務(wù)所需的基本功能。 通過(guò)建立數據交換系統將達成以下目標:
通過(guò)使用統一的技術(shù)手段與標準,提高交換的效率,降低維護復雜度;
同步優(yōu)化信息存儲結構,采用松散耦合的方式,確保數據與應用適當隔離,保證數據的安全;
使數據交換始終處于被有序管理的狀態(tài),避免了亂交換、重復交換等問(wèn)題的出現,保證系統的穩定性。
數據交換系統模型如下圖所示:
數據交換服務(wù)模型
(1)交換能力要求
l 數據交換服務(wù)系統交換能力要求如下:
l 需要提供信息整合功能,可按主題要求整合形成共享資源庫(人員、機構(單位)、物品等)數據集合,支持動(dòng)態(tài)組件形式的數據清洗等處理功能;
l 自動(dòng)編碼轉換,統一編碼標準;
l 支持主動(dòng)與被動(dòng)兩種數據交換方式,實(shí)現按需交換;
l 支持增量與全量數據同步;
l 基于 web 圖形化平臺配置,簡(jiǎn)單易操作;
l 統一管理元數據,提供統一標準化字段,規范系統;
l 為用戶(hù)提供個(gè)性定制處理組件接口,方便用戶(hù)自由拓展;
l 自定義數據交換格式,保證在無(wú)需代碼開(kāi)發(fā)的情況下,完成新交換節點(diǎn)的接入,實(shí)現交換元素及交換規則的調整等;
l 支持信息資源申請、調度流程化,支持目錄驅動(dòng)交換;
l 支持非侵入業(yè)務(wù)式的前置交換服務(wù)。
(2)資源管理
提供交換中心和前置交換節點(diǎn)之間各種交換表資源、組件和數據庫的管理功能,主要包括交換表管理、控制表管理、組件信息維護、字段轉化維護和數據庫進(jìn)程管理。
(3)交換管理
交換管理提供交換隊列管理、交換規則定義等功能,主要包括交換隊列查詢(xún)、交換隊列管理(添加、刪除、查看、修改)、交換規則定義等。
(4)資源監控
資源監控主要提供各種信息資源的監控功能,主要包括對各種交換隊列的狀態(tài)監控,訂閱服務(wù)的狀態(tài)監控。
(5)查詢(xún)統計
提供交換與整合信息資源的查詢(xún)和統計功能,主要包括交換數據查詢(xún)、整合數據查詢(xún)、系統信息查詢(xún)和交換數據統計。
(6)訂閱信息管理
提供信息訂閱服務(wù)功能,主要以表訂閱和整合信息訂閱的方式為主,主要包 括表訂閱查詢(xún)、表訂閱管理、表訂閱審批、表訂閱啟動(dòng)、整合訂閱查詢(xún)、整合訂閱管理、整合訂閱審批和整合訂閱啟動(dòng)。
(7)目錄互動(dòng)
提供目錄驅動(dòng)交換功能,資源使用方通過(guò)目錄方式獲取資源信息后,通過(guò)申請流程向平臺管理者與資源擁有方進(jìn)行申請,得到管理者與資源擁有方同意后,由平臺自動(dòng)開(kāi)始按配置的規則進(jìn)行信息資源的交換與共享。
信息資源交換需提供對目錄系統的相關(guān)接口,實(shí)現目錄系統與交換系統的互 聯(lián)互通,從目錄系統中讀取相應的資源信息,并能啟動(dòng)流程實(shí)現相應的交換配置,最終實(shí)現自動(dòng)交換。
(8)日志維護
日志維護提供交換系統的各種日志管理功能,主要包括系統日志、交換日志 和導入日志等,為系統提供全面的日志管理功能。
掃描二維碼推送至手機訪(fǎng)問(wèn)。
版權聲明:本文如需轉載請注明出處。如發(fā)現本站有涉嫌抄襲侵權/違法違規的內容, 請發(fā)送郵件至 xp@gdliontech.cn舉報,一經(jīng)查實(shí),本站將立刻刪除。