iT邦幫忙

0

【資料治理實戰回憶錄】01. 工欲善其事:雙平台驅動的基礎建設——為何我們需要「元數據」與「中台」並行?

  • 分享至 

  • xImage
  •  

在上一篇中,我提到了我們如何從失敗中摸索出治理的框架。但在正式推動任何流程或組織變革之前,我認為必須先備好兩把關鍵的武器。沒有這兩樣工具,治理就只是紙上談兵。

這兩把武器就是:

  1. 元數據管理平台 (Metadata Management Platform) —— 數據的「戶籍局」
  2. 資料中台 —— 數據的「加工廠」與「誘因核心」

一、元數據管理平台:治理的起點與「眼睛」

為什麼我說資料治理的起點一定是元數據 (Metadata)

當我們決定開始治理時,面臨的第一個靈魂拷問通常是:「我們到底有哪些資料?」緊接著是第二個問題:「我們治理得怎麼樣了?」

對於第一個問題,很多人直觀的反應是:「簡單,叫 DBA 把資料庫裡的 Table 全部導出來數一遍不就好了?」但這只能告訴你原本的技術名稱(例如 T001_ORG),卻無法告訴你這張表代表什麼業務含義。

對於第二個問題,我們更需要一個量化的指標來表述治理的成熟度。我們不能依賴散落在各部門電腦裡的 Excel 或 Word 檔來記錄這些資訊,因為那是「死」的文檔,無法被查詢、無法被更新,更無法形成資產。

因此,元數據管理平台的重要性就此體現。它的核心價值在於「結構化」 與「可視化」:

  • 資產盤點:它像一個自動更新的戶籍名簿,清楚記錄 HR 系統有多少主檔?定義是什麼?實體存放在哪個資料庫?
  • 進度追蹤:它能回答「我們治理了多少?」透過平台,我們可以一目了然地看到哪些資料已經打上了「業務標籤」,哪些已經被包裝成標準的「資料產品」,而哪些還是一團混亂的原始數據。
  • 策略指引:當我們要提升資料品質時,該從何下手?元數據平台能告訴你,哪些資料被標記為「核心主檔」,或者哪些表被最多系統引用(血緣分析)。抓大放小,這就是治理的戰略地圖。

簡而言之,元數據平台讓資料治理的成果得以「被看見」與「被查詢」。它連接著業務端的定義與 IT 端的實體,是我們對外展示治理成果的櫥窗。

二、資料中台:打破「死循環」的關鍵誘因

如果說元數據平台是治理的基礎,那麼資料中台就是我們團隊做過最正確的戰略投資。

在搭建中台之前,我們的治理推廣陷入了一個典型的「死循環」:

  1. 我們進入專案,熱情地介紹資料治理。
  2. 專案經理 (PM) 或系統分析師 (SA) 問:「那你們能提供什麼資料給我們?」
  3. 我們回答:「我們不產資料,你們要自己去接源頭系統(ERP/CRM)。」
  4. 我們接著說:「但在接源頭系統時,請順便幫我們把資料定義梳理好,填好這些規範表格。」
  5. 專案團隊崩潰:「找源頭已經夠難了,你們不但沒幫忙,還增加文書工作拖累進度?」
  6. 結果:專案結束,我們被踢開,什麼元數據都沒收到。

這是一個無解的難題。資料治理往往被視為「重要但不緊急」的事項,但在分秒必爭的專案開發中,「準時上線」永遠比「資料合規」重要一百倍。長官希望我們介入,但第一線團隊看到我們就頭痛。

為了打破這個僵局,我們痛定思痛,決定搭建資料中台。
我們不再只是一個「提要求」的單位,而是轉變成一個提供服務」的單位。我們在中台加值了強大的功能:
例如
「原本在 OLTP Server 跑報表要跑 7 天?來我們中台,分散式運算 4 小時就搞定。要不要合作?」
「很煩惱跨系統的授權管理?不知道怎麼做個資脫敏?上我們的平台託管,這些功能內建,直接開箱即用。」

*註:資料中台的功能會在後續的篇章進行分享

當我們手握「算力」與「便利性」這些籌碼時,局勢逆轉了。專案團隊為了使用中台的高效能與模組,主動尋求合作。這時,我們就有了「議價權」:
「要上中台沒問題,但請遵守我們的『入場規則』:幫我們定義好資料含義、標註好負責人 (Owner)。」

就這樣,資料治理從「拜託你填表格」變成了「使用中台的必要門票」。

三、雙平台驅動的生態系

現在,在我們公司內部,這兩個平台已經形成了完美的互補:

  • 元數據管理平台(入口/店面)
    它是中台的「入口網站」與「目錄」。畢竟不是所有使用者都會寫 SQL,也無法直接連進 Data Mart 翻找。好的元數據平台提供了類似電商的搜索體驗,讓使用者查詢:「我想找去年的銷售數據,哪裡有?」
  • 資料中台(實體/工廠)
    當使用者在元數據平台確認了資料定義與位置後,中台負責實際的資料計算、授權管控與API交付。

我們甚至刻意培養使用者的習慣:當有人問我們「某個欄位是什麼意思?」我們不再直接回答,而是丟給他元數據平台的連結:「請在這裡查詢。」

這兩個平台組成了我們治理的雙引擎:資料中台提供了「誘因」,讓專案團隊願意進場;元數據平台提供了「規範」,確保進場的資料井然有序。有了這兩者,資料治理才真正具備了落地的正當性與可行性。


圖片
  熱門推薦
圖片
{{ item.channelVendor }} | {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言