交管大數(shù)據(jù)治理的挑戰(zhàn)及應對方法 易華錄構(gòu)建交管數(shù)據(jù)治理體系

" 針對交管大數(shù)據(jù)建設，雖然有明確目標、公安部局平臺架構(gòu)指引、重點任務方向，但大數(shù)據(jù)、數(shù)據(jù)治理等技術(shù)、理論與交管實際業(yè)務結(jié)合，仍面臨建什么、怎么建以及建后可用性等方面的問題。 在交通大數(shù)據(jù)治理、數(shù)據(jù)資源中心建設中，要依據(jù)公安大數(shù)據(jù)“四化”頂層設計思路，以“數(shù)據(jù)應接盡接、統(tǒng)一架構(gòu)、共享互通、分層解耦、協(xié)同創(chuàng)新”的建設理念，自上而下總體設計、自下而上優(yōu)化流程，推動交管大數(shù)據(jù)的深化建設、改造及應用。

概 述

十三五期間，交通管理科技水平穩(wěn)步提升，已構(gòu)建集成指揮、交通管理綜合應用、交管大數(shù)據(jù)研判分析、互聯(lián)網(wǎng)交通安全綜合管理的四大核心平臺，同時大數(shù)據(jù)、人工智能等技術(shù)與交通管理業(yè)務結(jié)合，在違法AI預審、車輛布控預警等場景已進行較深入應用。 2021~2023年交通管理三年科技規(guī)劃中指出，交通管理改革和創(chuàng)新發(fā)展，需要充分發(fā)揮科技力量，加強交通管理精細化、智能化、專業(yè)化建設，不斷推動共建共治共享交通安全治理新格局的形成，而新基建將加速交通管理的數(shù)字化進程。 交管科技創(chuàng)新中明確提出深化交管大數(shù)據(jù)分析研判，鼓勵有條件的地方建設本地交通管理大數(shù)據(jù)資源池，包括可視化建模、模型創(chuàng)新、數(shù)據(jù)共享等目標任務。 針對交管大數(shù)據(jù)建設，雖然有明確目標、公安部局平臺架構(gòu)指引、重點任務方向，但大數(shù)據(jù)、數(shù)據(jù)治理等技術(shù)、理論與交管實際業(yè)務結(jié)合，仍面臨建什么、怎么建以及建后可用性等方面的問題。

構(gòu)建交管數(shù)據(jù)治理體系

數(shù)字化轉(zhuǎn)型是個持續(xù)性過程，只有開頭、沒有終點，面向未來業(yè)務的不確定性，通過數(shù)字化手段及思維，敏捷響應并驅(qū)動業(yè)務升級改造。

在交通大數(shù)據(jù)治理、數(shù)據(jù)資源中心建設中，要依據(jù)公安大數(shù)據(jù)“四化”頂層設計思路，以“數(shù)據(jù)應接盡接、統(tǒng)一架構(gòu)、共享互通、分層解耦、協(xié)同創(chuàng)新”的建設理念，自上而下總體設計、自下而上優(yōu)化流程，推動交管大數(shù)據(jù)的深化建設、改造及應用。

交管大數(shù)據(jù)架構(gòu)應圍繞交管科技規(guī)劃的目標，依托技術(shù)側(cè)分層解耦等通用規(guī)則，結(jié)合具體項目所在的外部系統(tǒng)、跨網(wǎng)傳輸、安全要求等情況來確定。同時，《部級公安交通管理大數(shù)據(jù)分析研判平臺應用架構(gòu)》可作為架構(gòu)定義的有效參考基礎，該規(guī)范中將架構(gòu)分為支撐層、接口層、模型層、應用層。

支撐層用于建設數(shù)據(jù)底座以及通用引擎能力集。模型層基于數(shù)據(jù)治理后的標準數(shù)據(jù)創(chuàng)新業(yè)務模型，模型建設由項目的數(shù)據(jù)治理團隊、業(yè)務科室警員依托可視化建模工具自行構(gòu)建。接口層作為中樞系統(tǒng)依托微服務技術(shù)，將數(shù)據(jù)能力、通用引擎能力在安全可控情況下對外提供。應用層則面向業(yè)務科室警員通過系統(tǒng)應用、可視化大屏、BI等豐富形式提供數(shù)據(jù)應用、檢索、挖掘分析能力。

圍繞提升道路交通治理體系和治理能力現(xiàn)代化的總目標，個人理解側(cè)重架構(gòu)設計應遵循擴展性、規(guī)范性、安全性、分層解耦等原則。

以往，數(shù)據(jù)需求科室或下級支、大隊獲取六合一等數(shù)據(jù)，通常以線下提交申請書的方式開展，在申請書中描述所需的數(shù)據(jù)表、字段、用途場景等信息，審批通過后再以下發(fā)庫的方式獲取相應數(shù)據(jù)。數(shù)據(jù)需求方流程繁瑣、效率低下，主管數(shù)據(jù)的科室也缺乏有力的監(jiān)管手段。

依托接口層安全規(guī)范的數(shù)據(jù)共享交換能力，面向已匯聚的跨部門、跨系統(tǒng)、跨層級的數(shù)據(jù)資源，數(shù)據(jù)需求方可在線瀏覽數(shù)據(jù)目錄，通過接口層工具提交數(shù)據(jù)需求申請，依托線上審批流程的方式獲取數(shù)據(jù)，且申請記錄及數(shù)據(jù)共享情況均可在后臺留痕，極大提升了數(shù)據(jù)資源獲取的效率。

從主管單位的角度出發(fā)，對內(nèi)，應制定數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理等標準，規(guī)范數(shù)據(jù)平臺的建設及內(nèi)部數(shù)據(jù)治理的實施過程；對外，應制定輸出數(shù)據(jù)元、數(shù)據(jù)字典等標準，規(guī)范治理過程及提供至外部系統(tǒng)建設單位及外部系統(tǒng)相關業(yè)務科室的輸出過程。從數(shù)據(jù)源頭開始，站在全局視角上制定標準架構(gòu)及流程規(guī)范。

當前交通管理體系暫未形成統(tǒng)一的數(shù)據(jù)標準，未來在標準制定中，應調(diào)研本地交管核心信息化系統(tǒng)的建設情況、拉通各系統(tǒng)建設方私有的數(shù)據(jù)標準，特別是數(shù)據(jù)字典、數(shù)據(jù)元等，從治理后主要的業(yè)務場景出發(fā)，準確評估內(nèi)部ETL、外部系統(tǒng)在未來改造過程中的工作難度。

建議按照交管六合一、公安行標、地方標準、國標、自定義優(yōu)先順序的原則，梳理制定數(shù)據(jù)標準。

交管數(shù)據(jù)常見問題分為以下幾種：

感知設備問題，例如GPS定位錯誤、時間同步等

數(shù)據(jù)格式錯誤，例如車輛所有人電話格式不符合要求、號牌長度及字符

數(shù)據(jù)重復問題

數(shù)據(jù)錄入不完整等問題

主要原因有：接入數(shù)據(jù)的系統(tǒng)缺少必要的輸入校驗、人員操作規(guī)范性、設備時間同步，以及核心系統(tǒng)多年迭代修改，數(shù)據(jù)庫設計不符合范式，治理人員較難掌握設計細節(jié)等方面問題。

治理團隊應通過科室調(diào)研等方式，持續(xù)積累各科室核心業(yè)務，通過業(yè)務加深對底層數(shù)據(jù)結(jié)構(gòu)的理解，但數(shù)據(jù)治理只能解決其中部分問題，例如格式、重復等。同時，更需要輔助大數(shù)據(jù)建設的主導單位來制定數(shù)據(jù)標準，配合完成數(shù)據(jù)標準體系的培訓，提升整體數(shù)據(jù)治理意識，構(gòu)建起數(shù)據(jù)問題閉環(huán)處理機制。

此外，應推動明確各類數(shù)據(jù)的唯一來源以及負責單位，在組織體系中主管領導支持下，由牽頭部門從上至下推動整改，通過信息化系統(tǒng)改造、信息錄入規(guī)范性等方式系統(tǒng)提升數(shù)據(jù)質(zhì)量，并遵循數(shù)據(jù)標準規(guī)劃建設新系統(tǒng)。

當前雖然已建成了統(tǒng)一的公安交通管理大數(shù)據(jù)分析研判平臺，但是因各地方數(shù)據(jù)資源差異、關注點不同以及需求差異性，往往存在水土不服、應用效果不理想的情況。但針對數(shù)據(jù)創(chuàng)新治理有更高要求的交警總隊、支隊會傾向于參考部級平臺來建設本地化的大數(shù)據(jù)應用及系統(tǒng)。

構(gòu)建彈性的、符合現(xiàn)狀的、完善的數(shù)據(jù)治理組織體系，必定是一場持續(xù)性、進階性的逐步完善過程。

我們通常將治理工作拆分為數(shù)據(jù)接入、數(shù)據(jù)標準化、數(shù)倉建設、數(shù)據(jù)模型集市、服務共享接口開發(fā)等環(huán)節(jié)，也包含橫貫各項任務的數(shù)據(jù)運維、標準規(guī)范工作等工作任務。

圍繞以上數(shù)據(jù)治理的工作任務，在實踐操作中一般分為兩種治理組織模式。

模式一：橫向劃分

按照任務類型，指派專人承擔，同時基于具體的工作量，人員可兼任多項治理任務。例如A可同時承擔數(shù)據(jù)接入及數(shù)據(jù)標準化工作。

由于各環(huán)節(jié)工作目標、范圍清晰，對治理人員綜合能力要求較低，此種方法適合批量的數(shù)據(jù)治理工作，環(huán)節(jié)內(nèi)的工作效率優(yōu)化。

模式二：縱向劃分

以治理場景驅(qū)動，按照業(yè)務劃分，治理人員承擔該業(yè)務需求相關的數(shù)據(jù)接入、標準化、建模及接口研發(fā)工作。

此種方法，以建模、業(yè)務場景驅(qū)動，可以降低不同治理環(huán)節(jié)負責人之間的溝通成本。治理人員為最終成果的交付時間、數(shù)據(jù)準確性負責。

兩種治理組織模式各有優(yōu)劣，應按照治理人員能力水平（復合型、專業(yè)性）、治理階段性工作節(jié)奏（快速實現(xiàn)場景或是穩(wěn)步全面推進）來選擇最優(yōu)方案，但無論選擇哪種，都需要有熟悉交管業(yè)務的數(shù)據(jù)治理架構(gòu)師整體統(tǒng)籌工作，牽頭數(shù)據(jù)標準規(guī)范工作，制定好工作分工及計劃。

此外，數(shù)據(jù)運維是交管數(shù)據(jù)治理價值體現(xiàn)的基礎保障性工作。但當前交管大數(shù)據(jù)處于起步發(fā)展階段，數(shù)據(jù)運維還不夠體系化，安排運維人員值守式人工巡檢現(xiàn)象仍較為普遍，存在效率低、用例覆蓋不全、依賴人員經(jīng)驗等問題。未來除了借助大數(shù)據(jù)平臺能力（例如常規(guī)的系統(tǒng)運維平臺、數(shù)據(jù)質(zhì)量規(guī)則設置、異常預警等技術(shù)手段），面對持續(xù)增加的治理場景，還需要借助人工智能，基于海量歷史數(shù)據(jù)，定義數(shù)據(jù)運維智能化模型，從而提升數(shù)據(jù)運維效率。

李君| 作者