序言

    元數(shù)據(jù)管理是從數(shù)據(jù)資產(chǎn)中獲取所有可能價值的關(guān)鍵。

    然而，大多數(shù)組織并沒有使用他們所掌握的所有數(shù)據(jù)來得出關(guān)于如何增加收入、實現(xiàn)法規(guī)遵從性或完成戰(zhàn)略目標(biāo)的更深層次的決策和分析。

    一、元數(shù)據(jù)是什么

    Gartner公司將元數(shù)據(jù)定義為“描述數(shù)據(jù)資產(chǎn)各個方面的信息，以便在整個生命周期中提高其可用性?！睂?shù)據(jù)轉(zhuǎn)變?yōu)橘Y產(chǎn)的是元數(shù)據(jù)?！?/strong>

    簡單的說，元數(shù)據(jù)就是關(guān)于數(shù)據(jù)的數(shù)據(jù)。每次從數(shù)據(jù)源采集數(shù)據(jù)、用戶訪問數(shù)據(jù)、在組織中移動數(shù)據(jù)、與來自其他數(shù)據(jù)源的其他數(shù)據(jù)集成或增強數(shù)據(jù)、分析、清理和分析數(shù)據(jù)時，都會生成它。

    它之所以有價值，是因為它提供了有關(guān)數(shù)據(jù)元素屬性的信息，這些屬性可用于指導(dǎo)戰(zhàn)略和運營決策。元數(shù)據(jù)管理是對描述其他數(shù)據(jù)的數(shù)據(jù)的管理，重點是關(guān)聯(lián)和沿襲。它涉及建立策略和流程，以確保數(shù)據(jù)可以在整個組織中集成、訪問、共享、鏈接、分析和維護。

    二、元數(shù)據(jù)的關(guān)鍵作用

    強大的數(shù)據(jù)管理策略和支持技術(shù)及業(yè)務(wù)所需的數(shù)據(jù)質(zhì)量，包括數(shù)據(jù)目錄(各種來源的數(shù)據(jù)集)、數(shù)據(jù)映射、版本控制、業(yè)務(wù)規(guī)則和詞匯表維護以及元數(shù)據(jù)管理(關(guān)聯(lián)和沿沿性)。

    元數(shù)據(jù)可以回答的重要問題:

    ·我們有什么數(shù)據(jù)?

    ·它是從哪里來的?

    ·它現(xiàn)在在哪里?

    ·自最初創(chuàng)建或采集以來，它發(fā)生了什么變化?

    ·誰被授權(quán)使用它，如何使用?

    ·它是否敏感或有任何相關(guān)的風(fēng)險?

    元數(shù)據(jù)還可以幫助組織:

    ·發(fā)現(xiàn)數(shù)據(jù)。從各種數(shù)據(jù)管理豎井中識別和查詢元數(shù)據(jù)。

    ·采集數(shù)據(jù)。自動采集來自不同數(shù)據(jù)管理筒倉的元數(shù)據(jù)，并將其合并到單個源中。

    ·構(gòu)造和部署數(shù)據(jù)源。將物理元數(shù)據(jù)連接到特定的數(shù)據(jù)模型、業(yè)務(wù)術(shù)語、定義和可重用設(shè)計標(biāo)準(zhǔn)。

    ·分析元數(shù)據(jù)。了解數(shù)據(jù)與業(yè)務(wù)的關(guān)系以及數(shù)據(jù)具有哪些屬性。

    ·地圖數(shù)據(jù)。確定集成數(shù)據(jù)的位置，并跟蹤數(shù)據(jù)如何移動和轉(zhuǎn)換。

    ·管理數(shù)據(jù)。開發(fā)一個治理模型來管理標(biāo)準(zhǔn)、策略和最佳實踐，并將它們與物理資產(chǎn)相關(guān)聯(lián)。

    ·數(shù)據(jù)社會化。利益相關(guān)者可以在他們的角色環(huán)境中查看數(shù)據(jù)。

    三、元數(shù)據(jù)管理的好處

    1. 更好的數(shù)據(jù)質(zhì)量。有了自動化，數(shù)據(jù)質(zhì)量得到了系統(tǒng)的保證，數(shù)據(jù)管道被無縫地治理和操作，使所有涉眾受益。實時識別集成數(shù)據(jù)源或目標(biāo)內(nèi)的數(shù)據(jù)問題和不一致性，通過增加洞察或修復(fù)的時間來提高整體數(shù)據(jù)質(zhì)量。在企業(yè)兼并重組過程中，為現(xiàn)有結(jié)構(gòu)的定期維護映射、移動和測試數(shù)據(jù)，從歷史系統(tǒng)移動到新系統(tǒng)，都更加容易。

    2. 更快的項目交付。自動化的企業(yè)元數(shù)據(jù)管理為數(shù)據(jù)移動和部署項目提供了更高的準(zhǔn)確性和高達70%的項目交付速度。它從各種數(shù)據(jù)源獲取元數(shù)據(jù)，并將任何數(shù)據(jù)元素從源映射到目標(biāo)，并協(xié)調(diào)跨平臺的數(shù)據(jù)集成。有了這幅準(zhǔn)確的元數(shù)據(jù)地圖，您可以加速大數(shù)據(jù)部署、數(shù)據(jù)倉庫、云遷移等。

    3.更快的洞察速度。像數(shù)據(jù)科學(xué)家花費高達80%的時間來尋找和理解源數(shù)據(jù)，并解決錯誤或不一致，而不是分析它的真正價值。通過更強大的數(shù)據(jù)操作和分析，我們可以逆轉(zhuǎn)這一等式，從而更快地獲得洞見，訪問、連接底層元數(shù)據(jù)及其沿襲。技術(shù)資源可以自由地集中在價值最高的項目上，而業(yè)務(wù)分析師、數(shù)據(jù)架構(gòu)師、ETL開發(fā)人員、測試人員和項目經(jīng)理可以更容易地協(xié)作以更快地做出決策。

    4. 提高生產(chǎn)率和降低成本。能夠依賴自動化和可重復(fù)的元數(shù)據(jù)管理流程可以提高生產(chǎn)率。例如，一個客戶已經(jīng)經(jīng)歷了生產(chǎn)率的急劇提高——超過85%——因為手工密集型和復(fù)雜的編碼工作已經(jīng)自動化，70%以上是因為無縫訪問和所有元數(shù)據(jù)的可見性，包括端到端血統(tǒng)。顯著的數(shù)據(jù)設(shè)計和轉(zhuǎn)換節(jié)約(分別高達50%和70%)也可能降低高達80%的數(shù)據(jù)映射成本。

    5. 法規(guī)遵從性。例如《通用數(shù)據(jù)保護條例》(GDPR)、《健康保險和便攜性責(zé)任法》(HIPAA)、巴塞爾銀行監(jiān)管委員會(BCBS)和加州消費者隱私法(CCPA)等法規(guī)特別影響金融、零售、醫(yī)療保健和制藥、生命科學(xué)等行業(yè)。當(dāng)關(guān)鍵數(shù)據(jù)沒有作為集成過程的一部分被發(fā)現(xiàn)、收集、編目、定義和標(biāo)準(zhǔn)化時，審計可能是有缺陷的。敏感數(shù)據(jù)被自動標(biāo)記，它的沿沿性被自動記錄，它的流轉(zhuǎn)被描述，因此它很容易被發(fā)現(xiàn)，它在工作流中的使用也很容易被跟蹤。

    6. 數(shù)字化轉(zhuǎn)型。知道什么數(shù)據(jù)的存在和它的價值潛力促進數(shù)字化轉(zhuǎn)型1)改善數(shù)字體驗,因為你了解組織與如何支持客戶,2)加強數(shù)字業(yè)務(wù)，因為數(shù)據(jù)準(zhǔn)備和分析項目建設(shè)得更快,3)驅(qū)動數(shù)字創(chuàng)新，因為數(shù)據(jù)可以用來提供新的產(chǎn)品和服務(wù),4)建立數(shù)字生態(tài)系統(tǒng)，因為組織需要建立平臺和伙伴關(guān)系來擴大規(guī)模和發(fā)展。

    7. 企業(yè)數(shù)據(jù)治理。數(shù)據(jù)治理包括協(xié)作關(guān)系中的IT用戶和業(yè)務(wù)用戶，因此數(shù)據(jù)治理是每個人的業(yè)務(wù)。現(xiàn)代的、戰(zhàn)略性的數(shù)據(jù)治理必須是一個持續(xù)不斷的進程，它要求從高管到員工的每個人重新思考他們的數(shù)據(jù)職責(zé)，并承擔(dān)新的合作和責(zé)任水平。隨著業(yè)務(wù)數(shù)據(jù)部門推動數(shù)據(jù)治理和戰(zhàn)略企業(yè)目標(biāo)之間的一致性，以及IT處理數(shù)據(jù)管理的技術(shù)機制，查找、信任和使用數(shù)據(jù)以有效地滿足任何組織目標(biāo)的大門打開了。

    四、自動化管理元數(shù)據(jù)

    如果采用手動方式管理元數(shù)據(jù)管理勢必代價高、耗時長、容易出錯，而且無法跟上動態(tài)企業(yè)數(shù)據(jù)管理基礎(chǔ)設(shè)施的步伐。盡管集成和自動化數(shù)據(jù)管理和數(shù)據(jù)治理對許多組織來說仍然是一個新概念，但它的優(yōu)勢是顯而易見的。

    元數(shù)據(jù)管理系統(tǒng)需要包括數(shù)據(jù)目錄、數(shù)據(jù)讀寫和自動化功能，以更好地了解和訪問數(shù)據(jù)資產(chǎn)，指導(dǎo)它們的使用，并確保遵循數(shù)據(jù)策略和最佳實踐。元數(shù)據(jù)管理的自動化為組織提供對不同數(shù)據(jù)流的可見性和控制，從收集到聚合和集成，包括具有完整上下游血緣和所有相關(guān)文檔的轉(zhuǎn)換。