一、產品概述

數據資源管理平臺為系統(tǒng)數據的集成接入提供統(tǒng)一的數據中心，實現數據的匯集加工、治理融合、共享交換。通過數據共享、開發(fā)和開放，實現對數據的深度分析、價值挖掘和合理應用。最終實現了水利全要素數字化映射。為流域防洪及水資源管理與調配等業(yè)務的“2+N”應用提供支撐。

二、系統(tǒng)架構

數據資源管理平臺的總體架構共分為六層：

1、信息采集層：主要對基礎數據、監(jiān)測數據、業(yè)務數據、地理空間數據、共享數據進行采集。包括水質信息、水位信息、雨量信息、氣象信息、流量信息、視頻信息等；利用部門上報和人工錄入的手段采集基礎數據，包括河道屬性、監(jiān)測站點信息、管理單位信息、工程信息等；此外，交換共享平臺采集水利、國土、市政、農業(yè)等相關部門的數據。

2、基礎設施層：負責為數據資源管理及網絡傳輸提供設施硬件環(huán)境，通過機房建設，實現數據存儲、數據分析及網絡傳輸。通過專網、公網，利用信息傳輸技術，實現數據信息安全穩(wěn)定傳輸，同時支持云平臺建設。

3、數據存儲層：建設不同類型的數據庫，對數據進行管理。包括基礎數據庫、監(jiān)測數據庫、地理空間數據庫、業(yè)務數據庫、模型庫、共享數據庫。

4、基礎支撐層：支撐數據資源管理平臺的運行，包括緩存中間件、消息中間件、jvm、python、Nginx等，為數據資源管理平臺功能的實現提供技術支撐。

5、應用層：數據資源管理平臺建設內容主要包括目錄管理、數據匯聚、數據治理、數據服務。

6、展示層：實現數據資源管理平臺與業(yè)務應用系統(tǒng)的友好對接，為業(yè)務系統(tǒng)提供基礎數據支撐。

三、產品功能

數據資源管理平臺通過對已建信息系統(tǒng)數據、人工填報數據、紙質文檔數據、物聯網數據等數據的獲取，構成數據源。同時對分散的多源異構數據進行治理，面向防洪調度、水資源管理與調配等業(yè)務需求，按照基礎數據、監(jiān)測數據、地理空間數據、業(yè)務數據、共享數據等進行分類存儲。同步建立數據的更新、發(fā)布、共享等機制與功能，豐富數據內容、提升數據質量，為實現數據資源的集中管理和數據查詢、多維度分析、可視化應用搭建數據基礎。數據資源管理平臺核心建設內容主要包括數據匯聚、數據治理、數據服務、數據資源目錄。

1、數據匯聚

集成各類數據資源，建立統(tǒng)一的數據倉庫，實現數據資源的集中管理和統(tǒng)一規(guī)范化。支持數據匯聚任務的可配置、可視化展示。

2、數據治理

支持多種數據處理和分析應用，支持對數據進行準確性、完整性、一致性、可靠性、規(guī)范性、時效性治理。數據治理，設計數據治理規(guī)則，對匯聚后的多源數據進行清洗，對不同類別的數據進行校驗。

3、數據服務

對數據庫中各類數據的服務化封裝，并提供基于標準化 API 接口訪問服務，實現數據資源目錄與數據的服務與發(fā)布。

4、數據資源目錄

實現對系統(tǒng)內數據進行全面摸底與系統(tǒng)梳理，將梳理結果以結構化目錄形式清晰呈現。通過層級化展示直觀呈現數據脈絡，為數據查詢、管理及應用提供精準指引。

四、平臺特色

1、實現B/S架構的實體和關系的動態(tài)數據建模以及可視化庫表設計。

2、可視化匯聚/治理任務配置和控制：通過拖拽的形式，完成數據匯聚任務的映射配置和執(zhí)行參數選擇以及任務的實時控制，實現匯聚任務管控的便捷化。

3、多數據源數據適配處理：支持sqlserver數據庫、oracle數據庫、Mysql數據庫、DB2數據庫、達夢數據庫、GaussDB數據庫、海量數據庫、WebService接口、Http接口、kafka消息隊列、rabbltmq消息隊列、rocketmq消息隊列等多種數據源類型的適配處理。

五、技術特點

數據資源管理平臺整合多源數據，治理多維度數據，建立統(tǒng)一倉庫集中規(guī)范管理，最后提供標準化 API 實現數據服務與發(fā)布。為數據的全生命周期管理提供安全、高效的支撐。

概括來講，數據資源管理平臺實現“四個一”：

一個全域數據源。整合已建系統(tǒng)數據、人工填報數據、紙質文檔數據、物聯網數據等多類型數據，形成全面覆蓋的數據源體系。

一個標準化治理體系。針對分散的多源異構數據實施治理，通過清洗校驗、分類存儲及建立更新發(fā)布機制，保障數據質量與規(guī)范。

一個統(tǒng)一數據倉庫。依托數據匯聚功能實現各類數據集中存儲管理，支持可視化配置與規(guī)范化管控。

一個開放服務接口。通過服務化封裝與標準化 API 接口，提供數據查詢、共享及可視化應用服務，支撐業(yè)務需求落地。

“一個全域數據源” 奠定數據基礎，“一個標準化治理體系” 保障數據質量，“一個統(tǒng)一數據倉庫” 實現集中管控，“一個開放服務接口” 支撐業(yè)務應用。這 “四個一”相互銜接，構建起數據資源管理平臺的核心技術框架，賦能數據全生命周期高效管理。

六、典型案例

1、淮河水利一張圖

2、數字孿生淮陰抽水泵站