【原】談?wù)剠^(qū)塊鏈和AI在主數(shù)據(jù)管理中的應(yīng)用

數(shù)據(jù)治理精英館 2021-12-24

展開全文

前言

主數(shù)據(jù)是企業(yè)擁有的最重要的資產(chǎn)之一。隨著數(shù)字化的不斷推進(jìn)和第四次工業(yè)革命的到來(lái)，主數(shù)據(jù)的價(jià)值和主數(shù)據(jù)管理的重要性只會(huì)越來(lái)越大。在我們繼續(xù)討論主數(shù)據(jù)管理的重要性之前，讓我們先了解什么是主數(shù)據(jù)。

Gartner將主數(shù)據(jù)定義為“……描述企業(yè)核心實(shí)體(包括客戶、員工、供應(yīng)商、層級(jí)和會(huì)計(jì)科目等)的一致和統(tǒng)一的標(biāo)識(shí)符和擴(kuò)展屬性集。”

從本質(zhì)上講，主數(shù)據(jù)指的是用于識(shí)別業(yè)務(wù)關(guān)鍵元素的所有靜態(tài)信息。這可以包括產(chǎn)品、人員(客戶、供應(yīng)商、員工、領(lǐng)導(dǎo)等)、特殊設(shè)備和工具、設(shè)施等名稱。主數(shù)據(jù)不同于事務(wù)性數(shù)據(jù)，如發(fā)票號(hào)碼、發(fā)票金額、日期、過(guò)程參數(shù)等。主數(shù)據(jù)的目的更多的是識(shí)別，而不是度量。

然而，這并不是說(shuō)主數(shù)據(jù)和事務(wù)數(shù)據(jù)是完全獨(dú)立的。事實(shí)上，主數(shù)據(jù)對(duì)于描述和理解事務(wù)和流程是至關(guān)重要的。它為事務(wù)性信息提供了更大的上下文，而主數(shù)據(jù)中的差異與事務(wù)性數(shù)據(jù)中的差異造成的損害一樣大，甚至更大。例如，計(jì)費(fèi)時(shí)識(shí)別客戶的錯(cuò)誤可能比錯(cuò)誤地計(jì)算正確客戶的賬單金額大得多。同樣的后果可能會(huì)嚴(yán)重得多。為了避免這種不幸，再怎么強(qiáng)調(diào)主數(shù)據(jù)管理的重要性也不為過(guò)。

一主數(shù)據(jù)管理的重要性

主數(shù)據(jù)管理與業(yè)務(wù)的幾乎每個(gè)關(guān)鍵方面都是緊密聯(lián)系在一起的。最重要的是，主數(shù)據(jù)幫助企業(yè)及其企業(yè)范圍的信息系統(tǒng)識(shí)別日常操作中涉及的不同組件。這些數(shù)據(jù)可能屬于個(gè)別客戶、供應(yīng)商、部件名稱、資本資產(chǎn)、產(chǎn)品等，必須進(jìn)行記錄和處理，以保持所有關(guān)鍵業(yè)務(wù)流程的真實(shí)記錄。主數(shù)據(jù)管理幫助組織成員和企業(yè)決策支持系統(tǒng)基于客觀準(zhǔn)確的信息做出快速?zèng)Q策。要做到這一點(diǎn)，每個(gè)元素的每個(gè)標(biāo)識(shí)符都必須在整個(gè)組織，最好是在整個(gè)供應(yīng)鏈中得到一致同意和建立。這確保了在正常操作期間識(shí)別這些關(guān)鍵元素的一致性，并將混淆和錯(cuò)誤降至最低。有效的主數(shù)據(jù)管理在優(yōu)化和加快組織流程方面也很有用，因?yàn)槭褂靡恢碌臄?shù)據(jù)可以確?？焖俳邮?、解釋和執(zhí)行通信。

關(guān)于為什么需要主數(shù)據(jù)管理(特別是在大型企業(yè)中)的另一個(gè)重要原因是確保與法規(guī)的遵從性。監(jiān)管機(jī)構(gòu)有嚴(yán)格的法律規(guī)定組織處理和處理財(cái)務(wù)和客戶數(shù)據(jù)的方式。建立并遵循標(biāo)準(zhǔn)化的主數(shù)據(jù)管理實(shí)踐可以幫助組織將其流程與這些法律保持一致。例如，《通用數(shù)據(jù)保護(hù)條例》(GDPR)要求企業(yè)建立相應(yīng)的實(shí)踐和協(xié)議，以防止與特定流程無(wú)關(guān)的各方訪問(wèn)客戶的個(gè)人數(shù)據(jù)。通常，客戶信息是客戶關(guān)系管理(customer Relationship Management, CRM)等流程的主數(shù)據(jù)的一部分，在這些流程中，銷售和客戶支持主管需要訪問(wèn)客戶信息，如聯(lián)系詳細(xì)信息，有時(shí)甚至是銀行信息。

因此，在不降低效率的同時(shí)又不影響合規(guī)性的情況下管理主數(shù)據(jù)需要自動(dòng)化和安全性。在某種意義上，自動(dòng)化和安全是AI和區(qū)塊鏈等技術(shù)帶給主數(shù)據(jù)管理的東西。

二人工智能在主數(shù)據(jù)管理中的作用

人工智能主要被引入到系統(tǒng)和進(jìn)程中，通過(guò)增強(qiáng)計(jì)算能力使它們更加自主。它的自動(dòng)化例行計(jì)算和數(shù)據(jù)輸入任務(wù)的能力，使人工智能在企業(yè)資源規(guī)劃(ERP)和其他信息管理系統(tǒng)中成為一個(gè)引人注目的例子。人工智能確保正確的信息總是在正確的時(shí)間傳遞給正確的人，從而使信息系統(tǒng)更加智能。這確保了使用信息系統(tǒng)的整個(gè)組織保持高效和敏捷。類似地，人工智能可以為主數(shù)據(jù)管理活動(dòng)帶來(lái)自主性和靈活性，如數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)管理，最終甚至是數(shù)據(jù)治理。

在使用初期，人工智能可以用來(lái)清理數(shù)據(jù)，確保必要數(shù)據(jù)的準(zhǔn)確和完整。它還可以用于使用自然語(yǔ)言處理(NLP)從普通文本中收集與主數(shù)據(jù)相關(guān)的附加信息，最大限度地減少手工數(shù)據(jù)輸入的需要，從而最大限度地減少低效和不準(zhǔn)確的可能性。人工智能還可用于確保維護(hù)和遵循既定的主數(shù)據(jù)管理標(biāo)準(zhǔn)和做法。這可以減少手動(dòng)執(zhí)行數(shù)據(jù)治理活動(dòng)的需要，并確保對(duì)主數(shù)據(jù)進(jìn)行治理。因此，人工智能可以自動(dòng)化數(shù)據(jù)管理，即管理和維護(hù)數(shù)據(jù)，使其在需要時(shí)易于訪問(wèn)。通過(guò)進(jìn)一步的開發(fā)，它還可以自動(dòng)構(gòu)建數(shù)據(jù)治理策略，并處理更復(fù)雜的數(shù)據(jù)治理任務(wù)。

三區(qū)塊鏈在保護(hù)主數(shù)據(jù)中的角色

確保數(shù)據(jù)安全至關(guān)重要，不僅是出于道德目的，也是為了遵守監(jiān)管機(jī)構(gòu)的規(guī)定。在這個(gè)時(shí)代，沒(méi)有提到區(qū)塊鏈，任何關(guān)于安全和隱私的談話都是不完整的。區(qū)塊鏈通常被認(rèn)為是隱私的同義詞，它可用于保護(hù)構(gòu)成主數(shù)據(jù)的敏感信息。這包括任何個(gè)人信息，如有關(guān)客戶和員工的信息。它還可以參考會(huì)計(jì)和銀行相關(guān)的信息，這些信息可能是采購(gòu)和銷售等過(guò)程所必需的。所有這些信息都可以使用區(qū)塊鏈通過(guò)加密哈希來(lái)保護(hù)。

企業(yè)可以在內(nèi)部構(gòu)建企業(yè)區(qū)塊鏈網(wǎng)絡(luò)，使用去中心化的模型來(lái)保護(hù)和管理主數(shù)據(jù)。它不僅可以保護(hù)信息不被非法修改，還可以防止由于中央服務(wù)器的物理?yè)p壞而意外丟失。此外，它還有助于以一種易于演示的方式遵守隱私法規(guī)。這是因?yàn)閰^(qū)塊鏈上的數(shù)據(jù)不僅是不可變的，而且對(duì)所有參與者都是透明和可見的，確保了更順利的審計(jì)和檢查。

哪些數(shù)據(jù)屬于主數(shù)據(jù)的范圍且會(huì)在不同行業(yè)、公司甚至不同職能之間發(fā)生變化。因此，AI和區(qū)塊鏈在不同組織中的作用可能根據(jù)它們對(duì)主數(shù)據(jù)的分類而不同。但是，無(wú)論組織是什么，對(duì)主數(shù)據(jù)管理的需求仍然存在。由于人工智能的多功能性和不斷增長(zhǎng)的能力，它將成為現(xiàn)代企業(yè)架構(gòu)中的標(biāo)準(zhǔn)配置。在采用人工智能進(jìn)行主數(shù)據(jù)管理的競(jìng)爭(zhēng)中處于領(lǐng)先地位的優(yōu)勢(shì)，不僅將立即產(chǎn)生效果，而且還將保持相對(duì)于未來(lái)不采用人工智能的企業(yè)的優(yōu)勢(shì)，因?yàn)楹翢o(wú)疑問(wèn)人工智能將繼續(xù)存在。