如何實(shí)施主數(shù)據(jù)管理MDM
主數(shù)據(jù)管理(MDM)的出現(xiàn)是由于企業(yè)有必要提高其關(guān)鍵數(shù)據(jù)資產(chǎn)(如產(chǎn)品數(shù)據(jù),資產(chǎn)數(shù)據(jù),客戶數(shù)據(jù),位置數(shù)據(jù)等)的一致性和質(zhì)量。
如今,許多企業(yè),尤其是全球企業(yè)擁有數(shù)百個(gè)單獨(dú)的應(yīng)用程序和系統(tǒng)(即ERP,CRM),跨組織部門或部門的數(shù)據(jù)很容易變得零散,重復(fù),并且最常見的是過時(shí)的。發(fā)生這種情況時(shí),準(zhǔn)確地回答關(guān)于企業(yè)的任何類型的績效指標(biāo)或KPI的最基本但最關(guān)鍵的問題就變得很痛苦。
獲得基本問題的答案,例如“誰是我們最賺錢的客戶?”,“哪種產(chǎn)品的利潤最高?” 或在某些情況下,“我們有多少名員工”?變得難以回答-或至少以任何程度的準(zhǔn)確性。
基本上,對(duì)準(zhǔn)確,及時(shí)的信息的需求非常迫切,并且隨著數(shù)據(jù)來源的增加,對(duì)其進(jìn)行一致的管理以及使數(shù)據(jù)定義保持最新狀態(tài),因此企業(yè)的所有部門都使用相同的信息是永無止境的挑戰(zhàn)。
為了應(yīng)對(duì)這些挑戰(zhàn),企業(yè)轉(zhuǎn)向了主數(shù)據(jù)管理(MDM)。
什么是主數(shù)據(jù)?
大多數(shù)軟件系統(tǒng)都有組成系統(tǒng)的幾個(gè)應(yīng)用程序共享和使用的數(shù)據(jù)列表。
例如:典型的ERP系統(tǒng)將至少具有“客戶主數(shù)據(jù)”,“項(xiàng)目主數(shù)據(jù)”和“客戶主數(shù)據(jù)”數(shù)據(jù)列表。此主數(shù)據(jù)通常是公司的關(guān)鍵資產(chǎn)之一。實(shí)際上,收購一家公司主要是為了訪問其客戶主數(shù)據(jù)并不罕見。
基本主數(shù)據(jù)定義
了解主數(shù)據(jù)最重要的步驟之一就是了解術(shù)語。首先,有一些非常容易理解且易于識(shí)別的主數(shù)據(jù)項(xiàng),例如“客戶”和“產(chǎn)品”。說實(shí)話,許多定義主數(shù)據(jù)的方法只是簡(jiǎn)單地引用一個(gè)通用的主數(shù)據(jù)項(xiàng)列表,例如:客戶,產(chǎn)品,位置,員工和資產(chǎn)。
但是,如何確定應(yīng)由MDM軟件管理的數(shù)據(jù)元素卻要復(fù)雜得多,并且無法滿足此類基本定義。這就造成了關(guān)于什么是主數(shù)據(jù)以及如何對(duì)其進(jìn)行限定的混亂。
為了更全面地回答“什么是主數(shù)據(jù)?”這個(gè)問題,我們可以看一下通常在公司中發(fā)現(xiàn)的6種數(shù)據(jù)類型:
非結(jié)構(gòu)化數(shù)據(jù):可在電子郵件,白皮書,雜志文章,企業(yè)內(nèi)部網(wǎng)門戶,產(chǎn)品規(guī)格,營銷資料和PDF文件中找到的數(shù)據(jù)。
交易數(shù)據(jù):具有歷史意義或其他系統(tǒng)需要分析的業(yè)務(wù)事件(通常與系統(tǒng)交易有關(guān)的數(shù)據(jù),例如銷售,交貨,發(fā)票,故障單,索賠以及其他貨幣和非貨幣相互作用)。交易數(shù)據(jù)是使用主數(shù)據(jù)實(shí)體的單位級(jí)別的交易。與主數(shù)據(jù)不同,事務(wù)本質(zhì)上是固有的時(shí)間和瞬時(shí)數(shù)據(jù)。
元數(shù)據(jù):有關(guān)其他數(shù)據(jù)的數(shù)據(jù)。它可以駐留在正式的存儲(chǔ)庫中或以各種其他形式存在,例如XML文檔,報(bào)告定義,數(shù)據(jù)庫中的列描述,日志文件,連接和配置文件。
分層數(shù)據(jù):存儲(chǔ)其他數(shù)據(jù)之間關(guān)系的數(shù)據(jù)。它可以作為會(huì)計(jì)系統(tǒng)的一部分存儲(chǔ),也可以作為對(duì)現(xiàn)實(shí)世界關(guān)系(例如公司組織結(jié)構(gòu)或產(chǎn)品線)的描述單獨(dú)存儲(chǔ)。分層數(shù)據(jù)有時(shí)被視為超級(jí)MDM域,因?yàn)樗鼘?duì)于理解和發(fā)現(xiàn)主數(shù)據(jù)之間的關(guān)系至關(guān)重要。
參考數(shù)據(jù):一種特殊類型的主數(shù)據(jù),用于對(duì)其他數(shù)據(jù)進(jìn)行分類或用于將數(shù)據(jù)與企業(yè)范圍以外的信息相關(guān)聯(lián)??梢栽谥鲾?shù)據(jù)或交易數(shù)據(jù)對(duì)象(例如,國家/地區(qū),貨幣,時(shí)區(qū),付款條件等)之間共享參考數(shù)據(jù)。
主數(shù)據(jù):企業(yè)內(nèi)部的核心數(shù)據(jù),描述開展業(yè)務(wù)所圍繞的對(duì)象。它通常不經(jīng)常更改,并且可以包含經(jīng)營業(yè)務(wù)所需的參考數(shù)據(jù)。主數(shù)據(jù)本質(zhì)上不是事務(wù)性的,但它確實(shí)描述了事務(wù)。主數(shù)據(jù)覆蓋的企業(yè)的關(guān)鍵名詞通常分為四個(gè)領(lǐng)域,這些領(lǐng)域內(nèi)的進(jìn)一步分類稱為主題區(qū)域,子領(lǐng)域或?qū)嶓w類型。
這些子域中的一些可以進(jìn)一步劃分。例如,由于您的公司可能既有普通客戶又有高級(jí)客戶和執(zhí)行客戶,因此可以根據(jù)激勵(lì)和歷史進(jìn)一步細(xì)分客戶。同時(shí),產(chǎn)品可能會(huì)按行業(yè)和行業(yè)進(jìn)一步細(xì)分。這種粒度級(jí)別很有幫助,因?yàn)橄M(fèi)包裝商品(CPG)領(lǐng)域的產(chǎn)品的要求,生命周期和CRUD周期可能與服裝行業(yè)的產(chǎn)品有很大不同。域的粒度基本上由其中的實(shí)體的屬性之間的差異大小決定。
確定要管理的主數(shù)據(jù)
盡管標(biāo)識(shí)主數(shù)據(jù)實(shí)體非常簡(jiǎn)單,但并非必須對(duì)所有符合主數(shù)據(jù)定義的數(shù)據(jù)進(jìn)行管理。通常,從卷的角度來看,主數(shù)據(jù)通常只占所有數(shù)據(jù)的一小部分,但它是一些最復(fù)雜的數(shù)據(jù),并且是維護(hù)和管理最有價(jià)值的數(shù)據(jù)。
那么,您應(yīng)將哪些數(shù)據(jù)作為主數(shù)據(jù)進(jìn)行管理?
我們建議使用以下標(biāo)準(zhǔn),在確定是否應(yīng)將給定實(shí)體視為主數(shù)據(jù)時(shí)應(yīng)綜合考慮所有這些標(biāo)準(zhǔn)。

雖然枚舉各種主數(shù)據(jù)實(shí)體類型很簡(jiǎn)單,但是有時(shí)確定公司中的哪些數(shù)據(jù)項(xiàng)應(yīng)被視為主數(shù)據(jù)有時(shí)更具挑戰(zhàn)性。
通常,可能通常需要照原樣管理通常不符合主數(shù)據(jù)定義的數(shù)據(jù),而不符合主定義的數(shù)據(jù)。
最終,在決定應(yīng)將哪些實(shí)體類型視為主數(shù)據(jù)時(shí),與其根據(jù)簡(jiǎn)單的實(shí)體類型列表進(jìn)行比較,不如根據(jù)業(yè)務(wù)需求的上下文中的行為和屬性對(duì)它們進(jìn)行分類。
為什么要煩惱管理主數(shù)據(jù)?
因?yàn)橹鲾?shù)據(jù)由多個(gè)應(yīng)用程序使用,所以一個(gè)地方的數(shù)據(jù)錯(cuò)誤可能會(huì)在使用它的所有應(yīng)用程序中引起錯(cuò)誤。
例如:
客戶主數(shù)據(jù)中不正確的地址可能意味著訂單,賬單和營銷資料都被發(fā)送到了錯(cuò)誤的地址。同樣,項(xiàng)目負(fù)責(zé)人的錯(cuò)誤價(jià)格可能會(huì)造成營銷災(zāi)難,而帳戶負(fù)責(zé)人中錯(cuò)誤的帳號(hào)可能會(huì)導(dǎo)致CEO處以巨額罰款甚至坐牢,這對(duì)犯錯(cuò)的人來說是一個(gè)職業(yè)上的限制。
現(xiàn)實(shí)生活中的主數(shù)據(jù)示例:為什么需要主數(shù)據(jù)?
一個(gè)典型的主數(shù)據(jù)恐怖故事
信用卡客戶從北第9街2847號(hào)移到北第11街1001號(hào)。客戶立即更改了帳單郵寄地址,但幾個(gè)月未收到帳單。一天,客戶從信用卡帳單部門接到威脅性電話,詢問為什么未付款??蛻舸_認(rèn)他們擁有新地址,而開票部門確認(rèn)文件中的地址是第11街北1001。客戶要求賬單的副本以結(jié)清帳戶。
再過兩個(gè)星期沒有帳單后,客戶回電,發(fā)現(xiàn)該帳戶已移交給收款公司。這一次,客戶發(fā)現(xiàn),即使文件中的地址是1001第11屆圣北,帳單地址被列為101 11 日圣北。在律師之間打了幾次電話和來信之后,賬單終于得到解決,信用卡公司失去了一個(gè)終身客戶。
在這種情況下,數(shù)據(jù)的主副本是準(zhǔn)確的,但另一個(gè)副本存在缺陷。主數(shù)據(jù)必須正確且一致。即使主數(shù)據(jù)沒有錯(cuò)誤,也很少有組織只有一組主數(shù)據(jù)。許多公司通過并購而成長,并且上級(jí)組織收購的每個(gè)公司都有其自己的客戶主數(shù)據(jù),項(xiàng)目主數(shù)據(jù)等。
如果您可以將新的主數(shù)據(jù)與當(dāng)前的主數(shù)據(jù)進(jìn)行合并,這將是不錯(cuò)的選擇,但是除非被收購的公司在遙遠(yuǎn)的國家/地區(qū)擁有完全不同的業(yè)務(wù),否則很可能會(huì)有一些客戶和產(chǎn)品出現(xiàn)在這兩個(gè)國家中多組主數(shù)據(jù)-通常具有不同的格式和不同的數(shù)據(jù)庫密鑰。
如果兩家公司都使用鄧白氏編號(hào)(Dun&Bradstreet Number)或社會(huì)保險(xiǎn)號(hào)(Social Security Number)作為客戶標(biāo)識(shí)符,那么發(fā)現(xiàn)哪些記錄是針對(duì)同一客戶的,就很容易解決;但是這種情況很少發(fā)生。在大多數(shù)情況下,客戶編號(hào)和零件編號(hào)是由創(chuàng)建主記錄的軟件分配的,因此在兩個(gè)數(shù)據(jù)庫中同一客戶或同一產(chǎn)品具有相同標(biāo)識(shí)符的機(jī)會(huì)非常小。如果從具有不同供應(yīng)商編號(hào)的不同供應(yīng)商那里購買了等效零件,則物料主數(shù)據(jù)甚至更難以調(diào)和。
由于同一客戶在不同數(shù)據(jù)庫中可能具有不同的姓名,客戶編號(hào),地址和電話號(hào)碼,因此將主列表合并在一起可能非常困難。例如,威廉·史密斯可能會(huì)以比爾·史密斯(Will)的身份出現(xiàn)。史密斯和威廉·史密斯。普通數(shù)據(jù)庫聯(lián)接和搜索將無法解決這些差異。
將需要一個(gè)非常復(fù)雜的工具來理解昵稱,備用拼寫和鍵入錯(cuò)誤。該工具可能還必須認(rèn)識(shí)到,如果不同的姓名都生活在同一地址或具有相同的電話號(hào)碼,則可以解決不同的姓名變體。
創(chuàng)建通用主數(shù)據(jù)列表的好處
雖然創(chuàng)建干凈的主列表可能是一個(gè)艱巨的挑戰(zhàn),但是擁有一個(gè)通用的主列表可以為底線帶來許多積極的好處,包括:
單一的合并賬單,可以節(jié)省資金并提高客戶滿意度
無需擔(dān)心從多個(gè)客戶列表中向客戶發(fā)送相同的營銷文獻(xiàn),這既浪費(fèi)錢又激怒了客戶
整個(gè)組織中客戶的凝聚力視圖,即用戶在將客戶帳戶移交給收款公司之前知道該客戶是否欠組織的其他部分,或者更重要的是,該客戶是否是另一個(gè)部門的最大來源業(yè)務(wù)
統(tǒng)一的物料視圖,以消除浪費(fèi)的金錢和貨架空間,以及由于在不同零件號(hào)下存儲(chǔ)相同物料而造成的人為短缺的風(fēng)險(xiǎn)
最后,向SOA和SaaS的發(fā)展使MDM成為關(guān)鍵問題。
例如:
如果創(chuàng)建通過定義良好的XML消息進(jìn)行通信的單個(gè)客戶服務(wù),則可能會(huì)認(rèn)為您已定義了單個(gè)客戶視圖。但是,如果將同一個(gè)客戶存儲(chǔ)在具有三個(gè)不同地址和四個(gè)不同電話號(hào)碼的五個(gè)數(shù)據(jù)庫中,那么您的客戶服務(wù)將返回什么?
同樣,如果您決定訂購?fù)ㄟ^SaaS提供的CRM服務(wù),則服務(wù)提供商將需要其數(shù)據(jù)庫的客戶列表。您將發(fā)送哪個(gè)列表?
由于所有這些原因,為組織維護(hù)高質(zhì)量,一致的主數(shù)據(jù)集正迅速成為一種必要。維護(hù)此數(shù)據(jù)所需的系統(tǒng)和過程稱為主數(shù)據(jù)管理。
什么是主數(shù)據(jù)管理?
主數(shù)據(jù)管理(MDM)是確保主數(shù)據(jù)在整個(gè)企業(yè)范圍內(nèi)得到協(xié)調(diào)的技術(shù),工具和流程。MDM提供了一個(gè)統(tǒng)一的主數(shù)據(jù)服務(wù),該服務(wù)可為整個(gè)企業(yè)以及業(yè)務(wù)合作伙伴提供準(zhǔn)確,一致和完整的主數(shù)據(jù)。
此定義中有兩點(diǎn)值得注意:
MDM不僅僅是一個(gè)技術(shù)問題。在許多情況下,將需要對(duì)業(yè)務(wù)流程進(jìn)行根本性更改以維護(hù)干凈的主數(shù)據(jù),并且某些最困難的MDM問題比技術(shù)問題更具政治性。
MDM包括創(chuàng)建和維護(hù)主數(shù)據(jù)。除非該解決方案包含工具和過程以隨著更新和擴(kuò)展而保持主數(shù)據(jù)的清潔和一致,否則要花費(fèi)大量時(shí)間,金錢和精力來創(chuàng)建一套干凈,一致的主數(shù)據(jù)是一種浪費(fèi)。
根據(jù)所使用的技術(shù),MDM可能涵蓋單個(gè)域(客戶,產(chǎn)品,位置或其他)或多個(gè)域。多域MDM的好處包括一致的數(shù)據(jù)管理經(jīng)驗(yàn),最小化的技術(shù)足跡,跨域共享參考數(shù)據(jù)的能力,更低的總擁有成本和更高的投資回報(bào)率。
鑒于MDM不僅僅是一個(gè)技術(shù)問題,這意味著您不能只安裝一項(xiàng)技術(shù)并整理所有內(nèi)容,那么強(qiáng)大的MDM程序又意味著什么呢?
在開始使用主數(shù)據(jù)管理程序之前,您的MDM策略應(yīng)圍繞以下6個(gè)學(xué)科構(gòu)建:
治理:管理組織機(jī)構(gòu),政策,原則和質(zhì)量以促進(jìn)對(duì)準(zhǔn)確的,經(jīng)過認(rèn)證的主數(shù)據(jù)的訪問的指令。本質(zhì)上,這是跨職能團(tuán)隊(duì)定義MDM程序各個(gè)方面的過程。
評(píng)估:您根據(jù)既定目標(biāo)做得如何?測(cè)量應(yīng)著眼于數(shù)據(jù)質(zhì)量和持續(xù)改進(jìn)。
組織:在整個(gè)MDM計(jì)劃中安排合適的人員,包括主數(shù)據(jù)所有者,數(shù)據(jù)管理員和參與治理的人員。
政策: MDM程序應(yīng)遵循的要求,政策和標(biāo)準(zhǔn)。
流程:整個(gè)數(shù)據(jù)生命周期中用于管理主數(shù)據(jù)的已定義流程。
技術(shù):主數(shù)據(jù)中心和任何支持技術(shù)。
MDM程序入門
一旦為您的MDM程序獲得了認(rèn)可,就該開始了。盡管將MDM應(yīng)用于組織中的所有主數(shù)據(jù)最有效,但在許多情況下,難以證明整個(gè)企業(yè)范圍內(nèi)的工作所付出的風(fēng)險(xiǎn)和費(fèi)用。
專業(yè)提示:通常,從成功的關(guān)鍵數(shù)據(jù)源入手并吸取教訓(xùn)后,通常更容易從一些關(guān)鍵的主數(shù)據(jù)源入手并擴(kuò)大工作量。
如果您從小做起,則應(yīng)該對(duì)所有最終可能要包含在程序中的主數(shù)據(jù)進(jìn)行分析,以免您做出設(shè)計(jì)決定或選擇工具時(shí)會(huì)迫使您重新嘗試合并主數(shù)據(jù)。新數(shù)據(jù)源。例如,如果您最初的客戶主實(shí)施僅包括您的直接銷售人員與10,000個(gè)客戶打交道,則您不希望做出設(shè)計(jì)決定而無法在以后添加10,000,000個(gè)Web客戶。
您的MDM項(xiàng)目計(jì)劃將受到需求,優(yōu)先級(jí),資源可用性,時(shí)間范圍和問題規(guī)模的影響。大多數(shù)MDM項(xiàng)目至少包括以下階段:
識(shí)別主數(shù)據(jù)來源
識(shí)別主數(shù)據(jù)的生產(chǎn)者和消費(fèi)者
收集和分析主數(shù)據(jù)的元數(shù)據(jù)
任命數(shù)據(jù)管理員
實(shí)施數(shù)據(jù)治理計(jì)劃和數(shù)據(jù)治理委員會(huì)
開發(fā)主數(shù)據(jù)模型
選擇一個(gè)工具集
設(shè)計(jì)基礎(chǔ)架構(gòu)
生成并測(cè)試主數(shù)據(jù)
修改生產(chǎn)和消費(fèi)系統(tǒng)
實(shí)施維護(hù)流程
如您所見,MDM是一個(gè)復(fù)雜的過程,可以持續(xù)很長時(shí)間。像軟件中的大多數(shù)事物一樣,成功的關(guān)鍵是逐步實(shí)施MDM,以便企業(yè)在實(shí)現(xiàn)整個(gè)項(xiàng)目是一個(gè)長期過程的同時(shí),實(shí)現(xiàn)一系列短期利益。
此外,沒有業(yè)務(wù)用戶的支持和參與,任何MDM項(xiàng)目都不會(huì)成功。IT專業(yè)人員不具備創(chuàng)建和維護(hù)高質(zhì)量主數(shù)據(jù)的領(lǐng)域知識(shí)。任何不包括對(duì)創(chuàng)建,維護(hù)和驗(yàn)證主數(shù)據(jù)的過程進(jìn)行更改的MDM項(xiàng)目都可能會(huì)失敗。
本文的其余部分將介紹用于創(chuàng)建和維護(hù)主數(shù)據(jù)的技術(shù)和過程的詳細(xì)信息。
您如何創(chuàng)建主列表?
無論您是購買MDM工具還是決定構(gòu)建自己的MDM工具,都有兩個(gè)基本步驟來創(chuàng)建主數(shù)據(jù):
清潔和標(biāo)準(zhǔn)化數(shù)據(jù)
匹配所有來源的數(shù)據(jù)以合并重復(fù)項(xiàng)。
清理和標(biāo)準(zhǔn)化主數(shù)據(jù)
在開始清理和規(guī)范化數(shù)據(jù)之前,您必須了解主數(shù)據(jù)的數(shù)據(jù)模型。在建模過程中,您應(yīng)該定義每個(gè)屬性的內(nèi)容,并定義從每個(gè)源系統(tǒng)到主數(shù)據(jù)模型的映射?,F(xiàn)在,您可以使用此信息來定義清理源數(shù)據(jù)所需的轉(zhuǎn)換。
清理數(shù)據(jù)并將其轉(zhuǎn)換為主數(shù)據(jù)模型與用于填充數(shù)據(jù)倉庫的提取,轉(zhuǎn)換和加載(ETL)過程非常相似。如果您已經(jīng)定義了ETL工具和轉(zhuǎn)換,則可以輕松修改主數(shù)據(jù)所需的這些內(nèi)容,而不用學(xué)習(xí)新的工具。以下是一些典型的數(shù)據(jù)清除功能:
標(biāo)準(zhǔn)化數(shù)據(jù)格式:使所有電話號(hào)碼看起來相同,將地址轉(zhuǎn)換為通用格式。
替換缺少的值:插入默認(rèn)值,從地址中查找郵政編碼,查找Dun&Bradstreet Number。
標(biāo)準(zhǔn)化值:將所有度量轉(zhuǎn)換為公制,將價(jià)格轉(zhuǎn)換為通用貨幣,將零件編號(hào)更改為行業(yè)標(biāo)準(zhǔn)。
映射屬性:從聯(lián)系人姓名字段中解析名字和姓氏,將部件號(hào)和部件號(hào)移至部件號(hào)字段。
大多數(shù)工具會(huì)清理它們可能的數(shù)據(jù),并將其余的數(shù)據(jù)放入錯(cuò)誤表中以進(jìn)行手工處理。根據(jù)匹配工具的工作方式,清理后的數(shù)據(jù)將被放入主表或一系列登臺(tái)表中。在清理每個(gè)源時(shí),應(yīng)檢查輸出以確保清理過程正常進(jìn)行。
匹配數(shù)據(jù)以消除重復(fù)
匹配主數(shù)據(jù)記錄以消除重復(fù)是創(chuàng)建主數(shù)據(jù)中最困難也是最重要的步驟。錯(cuò)誤的匹配實(shí)際上可能會(huì)丟失數(shù)據(jù)(例如,兩個(gè)Acme Corporation成為一家),而丟失的匹配會(huì)降低維護(hù)公用列表的價(jià)值。
因此,MDM工具的匹配精度是最重要的購買標(biāo)準(zhǔn)之一。
有些比賽非常簡(jiǎn)單。如果您對(duì)所有客戶都有社會(huì)安全號(hào),或者所有產(chǎn)品都使用通用編號(hào)方案,則數(shù)據(jù)庫JOIN將找到大多數(shù)匹配項(xiàng)。但是,這在現(xiàn)實(shí)世界中幾乎不會(huì)發(fā)生,因此匹配算法通常非常復(fù)雜。客戶可以在名稱,娘家姓,昵稱,地址,電話號(hào)碼,信用卡號(hào)等上進(jìn)行匹配,而產(chǎn)品在名稱,說明,零件號(hào),規(guī)格和價(jià)格上進(jìn)行匹配。
專業(yè)提示:匹配項(xiàng)越多,匹配項(xiàng)越接近,MDM軟件對(duì)匹配項(xiàng)的信心就越高。
將為每個(gè)匹配項(xiàng)計(jì)算該置信度,如果超過閾值,則記錄匹配。通常根據(jù)錯(cuò)誤匹配的結(jié)果來調(diào)整閾值。
例如:
您可以指定,如果置信度超過95%,則記錄將自動(dòng)合并;如果置信度在80%至95%之間,則數(shù)據(jù)管理員應(yīng)在合并之前批準(zhǔn)匹配。
您應(yīng)該如何合并數(shù)據(jù)?
大多數(shù)合并工具會(huì)將一組輸入合并到主列表中,因此最好的過程是從您最有信心的數(shù)據(jù)開始列表,然后一次合并其他源。如果您有很多數(shù)據(jù),并且有很多問題,則此過程可能需要很長時(shí)間。
專業(yè)提示:您可能希望從合并后希望從中獲得最大收益的數(shù)據(jù)開始,然后使用該數(shù)據(jù)運(yùn)行一個(gè)試點(diǎn)項(xiàng)目,以確保您的流程正常運(yùn)行,并看到預(yù)期的業(yè)務(wù)收益。
從那里,您可以在時(shí)間和資源允許的情況下開始添加其他資源。這種方法意味著您的項(xiàng)目將花費(fèi)更長的時(shí)間,甚至可能花費(fèi)更多,但是風(fēng)險(xiǎn)更低。這種方法還允許您從幾個(gè)組織開始,并在項(xiàng)目證明成功時(shí)添加更多組織,而不是嘗試從一開始就讓所有人參與進(jìn)來。
將源數(shù)據(jù)合并到主列表時(shí)要考慮的另一個(gè)因素是隱私。當(dāng)客戶成為客戶主體的一部分時(shí),任何有權(quán)訪問客戶主體的應(yīng)用程序都可能看到其信息。如果客戶數(shù)據(jù)是根據(jù)將其使用限制在特定應(yīng)用程序中的隱私策略獲得的,則您可能無法將其合并到客戶主數(shù)據(jù)中。此時(shí),如果您的目標(biāo)是生成主數(shù)據(jù)列表,那么您就完成了。打印出來或?qū)⑵淇啼浀酵獠坑脖P驅(qū)動(dòng)器上然后繼續(xù)。如果您希望您的主數(shù)據(jù)在添加和更改數(shù)據(jù)時(shí)保持最新,那么您將不得不開發(fā)基礎(chǔ)結(jié)構(gòu)和流程以隨著時(shí)間的推移管理主數(shù)據(jù)。
您如何維護(hù)主清單?
有許多用于管理和使用主數(shù)據(jù)的工具和技術(shù)。我們將在這里介紹三種較常見的方案:
單一副本:采用這種方法時(shí),主數(shù)據(jù)只有一個(gè)主副本。所有添加和更改都直接對(duì)主數(shù)據(jù)進(jìn)行。所有使用主數(shù)據(jù)的應(yīng)用程序都將重寫為使用新數(shù)據(jù),而不是其當(dāng)前數(shù)據(jù)。這種方法可以保證主數(shù)據(jù)的一致性,但是在大多數(shù)情況下不切實(shí)際。那是因?yàn)樾薷乃袘?yīng)用程序以使用具有不同架構(gòu)和不同數(shù)據(jù)的新數(shù)據(jù)源至少是非常昂貴的。如果您購買了某些應(yīng)用程序,則甚至不可能。
多個(gè)副本,單個(gè)維護(hù):通過這種方法,可以在數(shù)據(jù)的單個(gè)主副本中添加或更改主數(shù)據(jù),但是將更改發(fā)送到本地存儲(chǔ)副本的源系統(tǒng)。每個(gè)應(yīng)用程序都可以更新不屬于主數(shù)據(jù)的數(shù)據(jù)部分,但是它們不能更改或添加主數(shù)據(jù)。
例如:
庫存系統(tǒng)可能能夠更改零件的數(shù)量和位置,但是無法添加新零件,并且無法更改產(chǎn)品主數(shù)據(jù)中包含的屬性。這減少了所需的應(yīng)用程序更改次數(shù),但是應(yīng)用程序?qū)⒆畹拖薅鹊乇仨毥锰砑踊蚋轮鲾?shù)據(jù)的功能。用戶將必須學(xué)習(xí)新的應(yīng)用程序才能添加或修改主數(shù)據(jù),而他們通常不做的某些事情將不再起作用。
連續(xù)合并:在這種方法中,允許應(yīng)用程序更改其主數(shù)據(jù)副本。對(duì)源數(shù)據(jù)所做的更改將發(fā)送到主數(shù)據(jù)庫,然后在此處合并到主數(shù)據(jù)庫列表中。然后,對(duì)原版的更改將發(fā)送到源系統(tǒng),并應(yīng)用于本地副本。這種方法幾乎不需要更改源系統(tǒng)。如有必要,可以在數(shù)據(jù)庫中處理更改傳播,因此無需更改應(yīng)用程序代碼。表面上看,這似乎是理想的解決方案,因?yàn)榭梢宰畲蟪潭鹊販p少應(yīng)用程序更改,并且不需要重新培訓(xùn)。每個(gè)人都在做自己在做的事情,但是質(zhì)量更高,數(shù)據(jù)更完整。但是,此方法確實(shí)存在幾個(gè)問題:
更新沖突是可能的且難以調(diào)和:如果兩個(gè)源系統(tǒng)將客戶的地址更改為不同的值會(huì)發(fā)生什么?MDM軟件無法決定保留哪一個(gè),因此需要數(shù)據(jù)管理員的干預(yù)。同時(shí),客戶有兩個(gè)不同的地址。必須通過創(chuàng)建數(shù)據(jù)管理規(guī)則和標(biāo)準(zhǔn)操作程序來解決此問題,以確保減少或消除更新沖突。
必須重新合并其他內(nèi)容:添加客戶時(shí),可能有另一個(gè)系統(tǒng)已經(jīng)添加了該客戶。為了應(yīng)對(duì)這種情況,所有添加的數(shù)據(jù)都必須再次經(jīng)過匹配過程,以防止母版中出現(xiàn)新的重復(fù)項(xiàng)。
保持一致的值更加困難:如果將產(chǎn)品的重量從磅轉(zhuǎn)換為千克,然后再轉(zhuǎn)換為磅,則四舍五入會(huì)改變?cè)贾亓?。這可能會(huì)使輸入值然后幾秒鐘后看到值變化的用戶感到不安。
通常,所有這些事情都可以進(jìn)行計(jì)劃和處理,從而使用戶的生活變得更輕松一些,但要以維護(hù)更復(fù)雜的基礎(chǔ)架構(gòu)為代價(jià),并且要為數(shù)據(jù)管理員進(jìn)行更多的工作。這可能是一個(gè)可以接受的折衷方案,但應(yīng)該有意識(shí)地加以考慮。
關(guān)于版本和審核的幾點(diǎn)思考
無論您如何管理主數(shù)據(jù),重要的是能夠了解數(shù)據(jù)如何達(dá)到當(dāng)前狀態(tài)。
例如:
如果客戶記錄是由兩個(gè)不同的合并記錄合并而成的,則在數(shù)據(jù)管理員確定記錄被錯(cuò)誤合并的情況下,您可能需要知道原始記錄的樣子,并且實(shí)際上應(yīng)該是兩個(gè)不同的客戶。版本管理應(yīng)包括一個(gè)簡(jiǎn)單的界面,用于顯示版本并將所有或部分更改還原到以前的版本。
源代碼管理系統(tǒng)使用的版本的正常分支和更改分組對(duì)于維護(hù)不同的派生更改并將更改組還原到先前的分支也非常有用。數(shù)據(jù)管理和合規(guī)性要求通常會(huì)包含一種確定每個(gè)更改的人和更改時(shí)間的方法。
為了支持這些要求,MDM軟件應(yīng)包括用于審核主數(shù)據(jù)更改的工具。除了保留審核日志之外,MDM軟件還應(yīng)該包括一種簡(jiǎn)單的方法來查找您要查找的特定更改。MDM軟件一天可以審核數(shù)千個(gè)更改,因此審核日志的搜索和報(bào)告功能很重要。
關(guān)于層次管理的幾點(diǎn)思考
除了主數(shù)據(jù)本身之外,MDM軟件還必須維護(hù)數(shù)據(jù)層次結(jié)構(gòu),例如,產(chǎn)品物料清單,銷售區(qū)域結(jié)構(gòu),客戶的組織結(jié)構(gòu)等。對(duì)于MDM軟件來說,捕獲這些層次結(jié)構(gòu)很重要,但是對(duì)于MDM軟件來說,能夠獨(dú)立于底層系統(tǒng)修改層次結(jié)構(gòu)也很有用。
例如:
當(dāng)員工轉(zhuǎn)移到其他成本中心時(shí),可能會(huì)對(duì)差旅和費(fèi)用系統(tǒng),薪資,時(shí)間報(bào)告,報(bào)告結(jié)構(gòu)和績效管理產(chǎn)生影響。如果MDM軟件管理層次結(jié)構(gòu),則對(duì)層次結(jié)構(gòu)的更改可以在單個(gè)位置中傳播到所有基礎(chǔ)系統(tǒng)。
也可能有原因需要在MDM軟件中維護(hù)源系統(tǒng)中不存在的層次結(jié)構(gòu)。
例如:
可能需要將收入和支出匯總到任何單一源系統(tǒng)中都不存在的區(qū)域或組織結(jié)構(gòu)中。規(guī)劃和預(yù)測(cè)還可能需要臨時(shí)層次結(jié)構(gòu)才能為建議的組織變更計(jì)算“假設(shè)”數(shù)量。在許多情況下,還需要?dú)v史層次結(jié)構(gòu),才能將財(cái)務(wù)信匯總到過去存在的結(jié)構(gòu)中,而不是當(dāng)前結(jié)構(gòu)中。
由于這些原因,強(qiáng)大,靈活的層次結(jié)構(gòu)管理功能是MDM軟件的重要組成部分。
誰應(yīng)該參與您的MDM計(jì)劃?
現(xiàn)在您了解了什么以及為什么,讓我們討論誰,實(shí)際上,有幾種不同的方式來考慮誰參與MDM程序。首先,讓我們從高層次看一下三個(gè)核心角色:
數(shù)據(jù)治理:推動(dòng)定義,需求和解決方案的個(gè)人。這些用戶可以幫助管理員了解要?jiǎng)?chuàng)建的內(nèi)容,數(shù)據(jù)管理員可以了解要管理的內(nèi)容以及如何對(duì)其進(jìn)行管理。數(shù)據(jù)治理用戶指示數(shù)據(jù)管理者應(yīng)如何管理數(shù)據(jù)(包括管理過程),然后讓數(shù)據(jù)管理者對(duì)遵循這些要求負(fù)責(zé)。數(shù)據(jù)治理用戶還指示管理員在MDM解決方案的實(shí)施過程中要?jiǎng)?chuàng)建什么,尤其是從數(shù)據(jù)匹配和質(zhì)量的角度。數(shù)據(jù)治理用戶還需要維護(hù)MDM軟件的反饋回路,以確保一切正常。此反饋涵蓋了MDM程序的測(cè)量角度,并且可能包含以下信息:
新客戶需要花多長時(shí)間?
這個(gè)過程變快還是變慢?
與SLA相比,公司的情況如何?
如果有任何區(qū)域在滑移,為什么會(huì)發(fā)生這種情況?
數(shù)據(jù)匹配的效果如何?
從數(shù)據(jù)質(zhì)量的角度來看,有多少個(gè)業(yè)務(wù)規(guī)則失敗了?
管理員:負(fù)責(zé)設(shè)置和配置解決方案的IT人員。
數(shù)據(jù)管理員:由地面人員引導(dǎo),直接在解決方案中負(fù)責(zé)修復(fù),清理和管理數(shù)據(jù)。理想情況下,數(shù)據(jù)管理者來自整個(gè)業(yè)務(wù)部門,例如財(cái)務(wù)和營銷部門。通常,數(shù)據(jù)管理用戶在MDM程序中進(jìn)行數(shù)據(jù)管家的活動(dòng)。
其他MDM角色可以包括組織/項(xiàng)目類型,并且隨組織/項(xiàng)目類型而變化:

主數(shù)據(jù)管理利益相關(guān)者:
除了執(zhí)行和管理MDM策略的角色之外,成功的MDM項(xiàng)目的關(guān)鍵之一就是關(guān)鍵利益相關(guān)者的積極投入。典型的MDM參與的利益相關(guān)者包括代表業(yè)務(wù)和IT的利益相關(guān)者。積極的利益相關(guān)者通常包括但不限于以下角色:
商業(yè)或IT執(zhí)行贊助商
IT項(xiàng)目負(fù)責(zé)人
受影響業(yè)務(wù)線的主題專家
數(shù)據(jù)管理員
IT交付團(tuán)隊(duì)
在整個(gè)組織中定義了MDM利益相關(guān)者時(shí),確保他們的參與并致力于組織的MDM旅程至關(guān)重要。通過多種實(shí)施,Profisee確定了幾個(gè)“健康”指標(biāo)來幫助確定MDM利益相關(guān)者的影響:

主數(shù)據(jù)管理指導(dǎo)委員會(huì)
建議MDM利益相關(guān)者的管理層代表組成一個(gè)指導(dǎo)委員會(huì),以促進(jìn)跨職能決策。以下是有效的指導(dǎo)委員會(huì)的一些特點(diǎn):
適當(dāng)調(diào)整大小 -足夠大以代表優(yōu)先級(jí)利益相關(guān)者,但足夠小以快速分析關(guān)鍵信息并制定決策。
專注于快速?zèng)Q策
成為消除組織障礙的工具,而不僅僅是例行會(huì)議來聆聽項(xiàng)目團(tuán)隊(duì)成員的報(bào)告
不能代替動(dòng)手贊助
一旦確定了利益相關(guān)者,MDM項(xiàng)目章程應(yīng)包括成立指導(dǎo)委員會(huì)。在運(yùn)行數(shù)百個(gè)或MDM項(xiàng)目的基礎(chǔ)上,Profisee建議以下角色參加指導(dǎo)委員會(huì)。請(qǐng)注意,每個(gè)角色可能有一個(gè)以上的團(tuán)隊(duì)成員,或者某些角色可能不適用或公司的組織結(jié)構(gòu)。

結(jié)論
盡管很容易將主數(shù)據(jù)管理視為一個(gè)技術(shù)問題,但是如果沒有對(duì)業(yè)務(wù)流程和控制進(jìn)行相應(yīng)更改的純技術(shù)解決方案將可能無法產(chǎn)生令人滿意的結(jié)果。
本文介紹了采用主數(shù)據(jù)管理的原因,開發(fā)解決方案的過程,解決方案的技術(shù)實(shí)現(xiàn)的幾個(gè)選項(xiàng)以及在確保程序順利運(yùn)行的過程中應(yīng)涉及誰。
