靈感範文站

位置:首頁 > 實用文 > 實用文精選

調研思考:水務資料治理的探索與實踐探索

調研思考:水務資料治理的探索與實踐探索

水務資料治理的探索與實踐探索報告

當前水務工作進入高質量發展新階段,數字孿生流域建設成為推動實現水務治理體系和能力現代化的重要抓手。數字孿生流域的本質是對物理流域全要素和水務治理管理活動全過程進行數字化對映及智慧化模擬,關鍵是打造一個堅實可靠的資料底板,體系化開展資料治理工作是形成高質量資料底板的前提和基礎。

水務資料是支撐水務業務管理和決策的核心,由於來源廣泛、體量巨大、型別複雜、儲存多樣等原因,各類水務資料往往存在一數多源、權責不清、質量不高、標準不統一、無法有效關聯等問題,如同一水庫特徵水位值、河流資訊在不同系統中資料不一致,水務物件空間座標系統、高程系統不統一,“排放口”在水利、住房和城鄉建設、生態環境等部門定義不一致等。如果缺少資料治理,資料價值將無從談起。低質量資料導致低效率工作,資料孤島制約業務協同。

隨著水務資料影響數字孿生建設效益的問題愈發凸顯,資料治理工作關注度日益提高,已有一定的研究探索和試點。雍熙等以水庫為物件開展資料治理研究,基於資料倉庫和中臺技術,構建以基礎層、明細層、專題層為框架的資料資源體系,在統一的資料資源體系基礎上開展資料應用。xx提出水利資料治理xx個流程步驟,包括資料資源調查與梳理、資源目錄建設、水利資料庫建設、資料資源彙集、資料資源治理、資料管理平臺和執行環境建設。xx探討了水資源靜態、動態多源資料匯聚的方式,並按照資料規整、邏輯判斷、資料清洗、資料建模的流程完成從資料接入到治理的過程,最後通過建立資料關聯關係,實現對水資源多元資料的融合與檢索。xx面向防洪“四預”領域,圍繞資料採集整編、多源異構資料匯聚、多維多尺度資料融合、業務資訊資源庫構建、資料視覺化、資料服務、資料共享等方面提出資料底板建設框架和主要技術路線。目前關於水務資料治理的研究主要集中在技術實現領域,且僅涉及部分資料型別,缺乏全面性、系統性資料治理體系的梳理和實踐應用。為此,本研究以xx市水務治理為例,從問題發現、目標提出、框架設計、實踐路徑等方面進行水務資料治理的探索與實踐。

一、資料治理目標

xx市智慧水務開展“一體化、集約化”頂層設計以前,資訊化建設呈現煙囪式、孤島式特點,主要是基於業務條線垂直運作、單部門內迴圈的模式,以解決單一業務問題為目標建設應用系統,涉及的資料歸集、治理、應用較為片面區域性,難以發揮組織數字化轉型的效益。

傳統的資訊化建設模式面臨轉型突破的挑戰與契機,須樹立系統工程思維,系統性開展資料治理,從底層打破資料孤島,以統一標準提升資料質量,形成可靠的資料底板,方可統一支撐各類業務場景,進而形成“用資料說話、用資料管理、用資料決策、用資料創新”的管理新模式,推動業務協同。

基於以往資訊化建設的問題與形勢,xx市智慧水務建設明確以資料治理為核心,基於一數一源的原則,以打造數字孿生水務為目標,業務需求為導向,資料資產為核心和紐帶,構建水務資料生產、歸集、清洗、融合、服務、應用的一體化治理鏈條,構建管理體制健全、標準規範統一、質量安全可靠、協同平臺高效的綜合保障機制,形成“全要素歸集、全過程管理、全方位共享、全場景應用”的高質量資料治理體系,建立統一的基礎、監測和業務專題等資料集,形成語義精準、定義規範的水務資產數字化表達,以及邏輯清晰、要素精準的水務資料脈絡圖,融入城市級、流域級數字底座,為業務轉型創新及跨部門協同聯動奠定堅實的資料基礎。

二、資料治理框架

水務資料治理框架一般包括資料來源、平臺工具、資料服務、融合應用、資料資源和標準體系等方面。通過大資料平臺工具完成資料來源採集、整合、加工等流程,構建水務資料資源體系,基於資料中臺提供的資料資源,搭建各類水務業務場景。根據xx市水務資料治理目標,結合業務實際,借鑑國內外ICT(資訊與通訊技術)資料治理方法論,xx市水務局搭建了“xx+xx+N”的水務資料治理總體框架。

xx市水務局的資料治理框架總體上由匯聚多源資料的資料生產層、儲存資料的資料資產層、治理和管控資料的資料治理層及最上方的資料應用服務層組成,具體分析如下:

(一)資料生產層。資料生產層按資料來源主體、產生方式、資料型別等不同角度進一步細分。涉水資料來源主體主要有市區水務部門、供排水企業、生態環境局、氣象局、規劃和自然資源局等部門,產生方式主要有水位站、水質站、流量站等自動監測及人工填報等方式,資料型別主要包括結構化表格、文字、圖片視訊等。

(二)資料資產層。資料資產層是整個治理框架的核心。通過深度分析xx市水務的業務特徵,資料資產層分為以下xx類資料資產:a.基礎資料,分為江河湖泊、水務工程、監測站(點)和其他管理物件xx種類型,共xx個大類xx個水務物件小類;b.監測資料,包括河道、水庫湖泊、堰閘、泵站等水文(流量)xx類監測資料;c.業務資料,按不同業務類別分為“六水共治”、工程管理、政務執行等N個數據集,實現對資料資產的合理劃分與分類管理。

(三)資料治理層。資料治理層也是治理框架的核心,主要涵蓋生產—歸集—清洗—融合—服務—應用一體化治理鏈條,以及體制機制、標準規範、質量安全、協同平臺綜合保障機制,結合xx市水務現有體制制定相應規範和標準,建設相關管控與協同平臺,形成xx套資料治理體系,對歷史資料和後續新增資料進行有效治理。

(四)資料應用服務層。資料應用服務層是在資料歸集、治理的基礎上形成的可用於支撐xx市水務局各類業務的資料資源池和服務檯,為各類業務場景提供清潔可靠、一數一源的水務資料。

三、資料治理路徑與方法

根據xx市水務資料治理目標和框架體系,治理路徑推進思路如下:通過制定技術標準規範,建立水務資產“一物一碼”管理模式,明確權責關係,並通過一體化資料治理平臺固化相應規則,構建可貫穿資料生產、歸集、清洗、融合及對外服務全過程的治理體系,從規範性、完整性、準確性、實時性等方面提升資料質量,打破資料孤島,強化資料關聯關係挖掘和分析,為業務場景建設提供“數出一孔”的資料底座。

資料治理路徑具體包括以下xx個步驟:

(一)制定標準規範。在遵循SL/Txx—xx《水利物件分類與編碼總則》、SL/Txx—xx《水利資料目錄服務規範》、SL/Txx—xx《水利一張圖空間資訊服務規範》等行業標準規範的基礎上,結合xx市實際,編制水務物件分類與編碼、資料儲存和傳輸等標準規範;印發管理要求,明確各類資料數源主體及稽核流程;同時按照“資料不出底座,使用者不擁有資料”的原則,明確要求水務行業應用場景必須基於水務大資料中心開展建設,確保水務資料一數一源,初步形成水務資料治理技術和管理保障體系。

(二)搭建一體化資料治理平臺。搭建覆蓋資料歸集、清洗、融合及對外服務的資料治理一體化支撐平臺,打造基於GIS+BIM融合技術的資料視覺化呈現平臺,建設基礎、監測資料管理平臺,對全xx市水務基礎、監測、業務等資料資產進行統一歸集和治理,內建資料權責關係,對發現的資料問題進行跟蹤和處置,保證資料一數一源及準確性;形成xx市水務一張圖,彙集呈現全市水務物件資訊;統一發布資料資源目錄和服務介面,向上級行業主管部門、全市各行業提供統一標準的水務資料服務。

(三)融合城市資料底座。依託xx市統一的CIM(城市資訊模型)平臺,基於城市地理空間資料、涉水基礎要素和監測資料等資訊資源,建設數字孿生水務基礎底板,可為數字孿生城市提供準確規範、邏輯清晰的水務資料集,為跨部門涉水業務協同和聯動奠定資料基礎,將水務管理深度融入城市治理。

(四)建立資料與業務雙輪驅動機制。一方面,資訊化部門通過構建一體化的資料治理平臺,內建資料權責關係,統一資料呼叫機制,驅動各業務部門參與資料底板的建設,持續更新、維護、使用資料;另一方面,通過典型業務場景的構建倒逼資料底板持續完善,構建水環境達標、水量平衡、水旱災害防禦等核心業務場景,通過業務場景數字化目標的實現反向推動各業務部門、上下級機構完善資料採集體系,提升資料質量,增強資料共建共享意識。

四、資料治理成果及成效

目前,xx市水務局初步建成資料底座版,整合歸集已有普查成果和資料資源,以統一的資料標準及管理規則初步完成全市“河、庫、廠、網、站、線”等xx個大類xx個小類約xx個重點水務物件基礎資料歸集和治理,匯聚了全市各涉水部門水、雨、工情約xx個測站的實時監測資料,改變了以往資料煙囪式分散儲存於xx餘個不同應用系統的情況,初步解決了資料不同源、不可信、不維護的問題。基於全市CIM平臺底座,圍繞水務物件關聯關係構建水務一張圖,對外共統一提供了xx項水務資料服務,有力推動了資料共享從“資料搬家”向“產品服務”模式的轉變,提升了資料服務應用效率。構建的xx市水務一張圖如圖xx所示。

數字底座的建設為xx市區水務部門、供排水企業提供了統一平臺工具,以供更新維護、使用資料,確保水務資料一數一源,釐清資料權責關係,規範資料標準,提升資料質量,助力業務人員提高資料統計工作效率。資料底座的建設也為數字化業務場景的搭建奠定了堅實的資料基礎,有效支撐了以下業務

管理:

(一)水安全。通過匯聚全市雨、水、工、險情資料,並建立河流、水庫、水閘、泵站等水務物件空間拓撲關係,打造水旱災害防禦場景,初步實現了水庫、河道、內澇風險分析,為水旱災害防禦形勢研判提供了支撐。

(二)水資源。通過匯聚全市“取、供、用、耗、排”水迴圈全鏈條各部門水量資料,打造了水量平衡場景,支撐了水量平衡相關業務的聯動和協同,推動了用水效率的提高。

(三)水環境。通過建立河流、水質淨化廠、重點排口等水環境要素監測和關聯分析的數字化表達,打造水環境達標場景,有效支撐生活汙水收集率、進廠BOD(生化需氧量)質量濃度、優良河長穩步提升。

資料治理是數字孿生流域(水務)建設的核心,是實現水務業務數字化轉型的基礎,資料治理體系包括資料生產層、資產層、治理層和應用服務層。資料治理可分為制定資料標準規範、搭建一體化資料治理平臺、融合城市數字底座及建立資料與業務雙輪驅動機制等步驟。xx市智慧水務通過體系化資料治理,建立了統一的基礎、監測和業務專題等資料集,形成了水務資料資產,可為水務業務工作提供資料基礎和依據。

現階段資料治理主要以資料清洗、確保資料的正確性和唯一性為主,隨著水務資料資產庫的不斷富集、累積,下一步可探索資料關聯關係的挖掘和分析,逐步提升資料賦能業務決策的能力。