隨著數(shù)據(jù)源的增加,準(zhǔn)確、及時(shí)的信息需求就會(huì)變得越來越迫切。保持?jǐn)?shù)據(jù)定義是最新的,并一致地管理數(shù)據(jù)變得越來越難,企業(yè)各部門都使用相同的數(shù)據(jù)更是難上加難。為了應(yīng)對(duì)這一挑戰(zhàn),企業(yè)主數(shù)據(jù)管理應(yīng)運(yùn)而生。本文就帶您一起了解一下如何做好主數(shù)據(jù)管理項(xiàng)目落地。
什么是主數(shù)據(jù)?
主數(shù)據(jù)(Master Data)是在多系統(tǒng)集成應(yīng)用的背景下,被多個(gè)信息系統(tǒng)(或功能模塊)共用的基礎(chǔ)性標(biāo)準(zhǔn)化的數(shù)據(jù)。主數(shù)據(jù)是對(duì)企業(yè)核心業(yè)務(wù)而言非常重要的單一來源,并且具有唯一性、共享性、穩(wěn)定性、有效性。換言之,主數(shù)據(jù)支撐業(yè)務(wù)流程和事務(wù)。
其實(shí)主數(shù)據(jù)理解起來非常簡單,比如記賬,“誰,在哪個(gè)店里,買了什么東西,一共多少錢”。這句話里所有非數(shù)值的,都是主數(shù)據(jù),買東西的人、賣東西的店、產(chǎn)生交易的商品等等都是主數(shù)據(jù)。常見的主數(shù)據(jù)包括:供應(yīng)商、客戶、物料、人員、部門、項(xiàng)目等。
主數(shù)據(jù),帶個(gè)主字,英文是Master,字面就顯示出這種數(shù)據(jù)的地位很高,非常的重要,為什么這么重要呢?因?yàn)橹鲾?shù)據(jù)管理的對(duì)象是企業(yè)核心業(yè)務(wù)實(shí)體的基礎(chǔ)業(yè)務(wù)數(shù)據(jù),比如客戶、供應(yīng)商、員工、組織架構(gòu)、總賬科目、成本中心、利潤中心、物料、設(shè)備資產(chǎn)、工作中心,組件BOM等等,如果這類數(shù)據(jù)沒有管好,多個(gè)系統(tǒng)之間數(shù)據(jù)交換的成本就會(huì)非常大(需要各自維護(hù),需要翻譯,……),如果沒有管好主數(shù)據(jù),系統(tǒng)間交換的數(shù)據(jù)就會(huì)發(fā)生混亂并產(chǎn)生錯(cuò)誤,嚴(yán)重影響系統(tǒng)的正常使用。
也就是說,主數(shù)據(jù)需要在各個(gè)系統(tǒng)間、各個(gè)業(yè)務(wù)部門間共享并持續(xù)保持一致,是企業(yè)保證各個(gè)系統(tǒng)的應(yīng)用質(zhì)量、實(shí)現(xiàn)跨系統(tǒng)業(yè)務(wù)協(xié)同和決策支持的基礎(chǔ)。主數(shù)據(jù)是否管理與治理好,是未來企業(yè)數(shù)字化轉(zhuǎn)型是否成功的基礎(chǔ)保障。
主數(shù)據(jù)管理內(nèi)容:兩體系一工具
主數(shù)據(jù)管理的主要內(nèi)容包括“兩體系、一工具”,即主數(shù)據(jù)管理標(biāo)準(zhǔn)體系、主數(shù)據(jù)管理保障體系和主數(shù)據(jù)管理工具。其中,主數(shù)據(jù)管理標(biāo)準(zhǔn)體系是主數(shù)據(jù)管理工作的重中之重,主數(shù)據(jù)管理保障體系為主數(shù)據(jù)管理保駕護(hù)航,主數(shù)據(jù)管理工具確保主數(shù)據(jù)管理有效落地。
(一) 主數(shù)據(jù)管理標(biāo)準(zhǔn)體系
主數(shù)據(jù)管理標(biāo)準(zhǔn)體系是主數(shù)據(jù)管理工作的重中之重,通過主數(shù)據(jù)標(biāo)準(zhǔn)化,才能為實(shí)現(xiàn)部門和系統(tǒng)間的數(shù)據(jù)集成和共享,打通企業(yè)橫向產(chǎn)業(yè)鏈和縱向管控奠定數(shù)據(jù)基礎(chǔ)。主數(shù)據(jù)標(biāo)準(zhǔn)管理體系包含業(yè)務(wù)標(biāo)準(zhǔn)(編碼規(guī)則、分類規(guī)則、描述規(guī)則等)、主數(shù)據(jù)模型標(biāo)準(zhǔn)。主數(shù)據(jù)標(biāo)準(zhǔn)管理體系在建設(shè)梳理的過程中,一般會(huì)衍生出一套代碼體系表或稱主數(shù)據(jù)資產(chǎn)目錄。
主數(shù)據(jù)業(yè)務(wù)標(biāo)準(zhǔn)是對(duì)主數(shù)據(jù)業(yè)務(wù)含義的統(tǒng)一解釋及要求,包括主數(shù)據(jù)來源、主數(shù)據(jù)的管理級(jí)次、統(tǒng)一管理的基礎(chǔ)數(shù)據(jù)項(xiàng)、數(shù)據(jù)項(xiàng)在相關(guān)業(yè)務(wù)環(huán)境中產(chǎn)生過程的描述及含義解釋、數(shù)據(jù)之間的制約關(guān)系、數(shù)據(jù)產(chǎn)生過程中所要遵循的業(yè)務(wù)規(guī)則。主數(shù)據(jù)業(yè)務(wù)規(guī)則包含主數(shù)據(jù)各數(shù)據(jù)項(xiàng)的編碼規(guī)范、分類規(guī)則、描述規(guī)則等。
編碼規(guī)則:主數(shù)據(jù)代碼的編碼規(guī)則。例如:物料代碼采取采用“1”開頭的8位無含義數(shù)字流水碼。
分類規(guī)則:依據(jù)相關(guān)業(yè)務(wù)環(huán)境和管理需求形成分類規(guī)則。例如:物料分類根據(jù)物料的自然屬性及所包括范圍的大小,將物料分為大、中、小三類。
描述規(guī)則:又稱命名規(guī)范。例如:物料描述規(guī)則具體物料描述規(guī)則的定義,主要解決物料描述的規(guī)范化問題。
主數(shù)據(jù)模型標(biāo)準(zhǔn)包含:主數(shù)據(jù)邏輯模型和主數(shù)據(jù)物理模型。
主數(shù)據(jù)邏輯模型:將高級(jí)的業(yè)務(wù)概念以主數(shù)據(jù)實(shí)體/屬性及其關(guān)系的形態(tài)在邏輯層面上更詳細(xì)的表達(dá)出來,主要的表現(xiàn)形式是ERD。
主數(shù)據(jù)物理模型又稱主數(shù)據(jù)的存儲(chǔ)結(jié)構(gòu)表。業(yè)務(wù)在應(yīng)用環(huán)境中對(duì)數(shù)據(jù)的統(tǒng)一技術(shù)要求,包括對(duì)數(shù)據(jù)長度、數(shù)據(jù)類型、數(shù)據(jù)格式、數(shù)據(jù)的缺省值、可否為空的定義、索引、約束關(guān)系等設(shè)計(jì)要素,保證數(shù)據(jù)模型中設(shè)計(jì)的結(jié)果能夠真正落地到某個(gè)具體的數(shù)據(jù)庫當(dāng)中,并提供了系統(tǒng)初始設(shè)計(jì)所需要的基礎(chǔ)元素,以及相關(guān)元素之間的關(guān)系。
(二) 主數(shù)據(jù)管理保障體系
主數(shù)據(jù)管理需要有配套的管理保障體系保駕護(hù)航。通過主數(shù)據(jù)管理組織進(jìn)行統(tǒng)一領(lǐng)導(dǎo),確定主數(shù)據(jù)指導(dǎo)思想、目標(biāo)和任務(wù),協(xié)調(diào)解決主數(shù)據(jù)管理相關(guān)的重大問題。需要數(shù)據(jù)標(biāo)準(zhǔn)化的歸口管理部門,負(fù)責(zé)標(biāo)準(zhǔn)化的統(tǒng)一規(guī)劃、綜合管理;需要業(yè)務(wù)組由相關(guān)事業(yè)部和職能部門組成,并通過配套主數(shù)據(jù)相關(guān)制度、流程、應(yīng)用管理和評(píng)價(jià)為主數(shù)據(jù)管理保駕護(hù)航。
主數(shù)據(jù)管理保障體系包括主數(shù)據(jù)管理組織、制度、流程、應(yīng)用及管理評(píng)價(jià)五部分。
1.主數(shù)據(jù)管理組織
主數(shù)據(jù)管理組織主要包括企業(yè)內(nèi)各類主數(shù)據(jù)的管理組織架構(gòu)、運(yùn)營模式、角色與職責(zé)規(guī)劃,通過組織體系規(guī)劃建立明確的主數(shù)據(jù)管理機(jī)構(gòu)和組織體系,落實(shí)各級(jí)部門的職責(zé)和可持續(xù)的主數(shù)據(jù)管理組織與人員。
典型的主數(shù)據(jù)管理組織主要包含以下三層組織架構(gòu):
(1)決策層:設(shè)立主數(shù)據(jù)領(lǐng)導(dǎo)小組,一般由企事業(yè)單位信息化領(lǐng)導(dǎo)小組成員組成,對(duì)主數(shù)據(jù)標(biāo)準(zhǔn)化工作進(jìn)行統(tǒng)一領(lǐng)導(dǎo)確定指導(dǎo)思想、目標(biāo)和任務(wù),協(xié)調(diào)解決標(biāo)準(zhǔn)化相關(guān)的重大問題。
(2)管理層:在領(lǐng)導(dǎo)小組的統(tǒng)一領(lǐng)導(dǎo)下,按照“歸口管理,分工負(fù)責(zé)” 的原則,設(shè)立主數(shù)據(jù)聯(lián)合工作組,該工作組為常設(shè)組織,主要由主數(shù)據(jù)標(biāo)準(zhǔn)化辦公室、業(yè)務(wù)組和技術(shù)組共同組成。
(3)執(zhí)行層:包括企業(yè)總部和下屬企業(yè)專職及兼職主數(shù)據(jù)管理員組成。負(fù)責(zé)主數(shù)據(jù)在本單位的貫徹落實(shí)、應(yīng)用檢查工作;負(fù)責(zé)本單位主數(shù)據(jù)需求的收集、審核、提報(bào)工作;負(fù)責(zé)本單位主數(shù)據(jù)的培訓(xùn)、宣貫和日常維護(hù)等工作。
2.主數(shù)據(jù)管理制度
主數(shù)據(jù)管理制度規(guī)定了主數(shù)據(jù)管理工作的內(nèi)容、程序、章程及方法,是主數(shù)據(jù)管理人員的行為規(guī)范和準(zhǔn)則,主要包含各種管理辦法、規(guī)范、細(xì)則、手冊(cè)等??蓞⒖嫉闹鲾?shù)據(jù)管理制度主要包含:《主數(shù)據(jù)管理辦法》、《主數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范》、《主數(shù)據(jù)提案指南》、《主數(shù)據(jù)維護(hù)細(xì)則》、《主數(shù)據(jù)管理工具操作手冊(cè)》。
3.主數(shù)據(jù)管理流程
主數(shù)據(jù)管理流程是提升主數(shù)據(jù)質(zhì)量的重要保障,通過梳理數(shù)據(jù)維護(hù)及管理流程,建立符合企業(yè)實(shí)際應(yīng)用的管理流程,保證主數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范得到有效執(zhí)行,實(shí)現(xiàn)主數(shù)據(jù)的持續(xù)性長效治理。主數(shù)據(jù)管理流程可以以管理制度的方式存在,也可以直接嵌入到主數(shù)據(jù)管理工具中。
主數(shù)據(jù)管理流程主要包含以下三個(gè)方面的內(nèi)容:
(1)主數(shù)據(jù)業(yè)務(wù)管理流程:對(duì)主數(shù)據(jù)的申請(qǐng)、校驗(yàn)、審核、發(fā)布、變更、凍結(jié)、歸檔等進(jìn)行全生命周期管理,滿足主數(shù)據(jù)在企業(yè)深入應(yīng)用的不同管理需求。
(2)主數(shù)據(jù)標(biāo)準(zhǔn)管理流程:通過對(duì)主數(shù)據(jù)標(biāo)準(zhǔn)的分析、制定、審核、發(fā)布、應(yīng)用與反饋等流程進(jìn)行設(shè)計(jì),保證主數(shù)據(jù)標(biāo)準(zhǔn)的科學(xué)、有效、適用。
(3)主數(shù)據(jù)質(zhì)量管理流程:對(duì)主數(shù)據(jù)的創(chuàng)建、變更、凍結(jié)、歸檔等業(yè)務(wù)過程進(jìn)行質(zhì)量管理,設(shè)計(jì)數(shù)據(jù)質(zhì)量評(píng)價(jià)體系,實(shí)現(xiàn)數(shù)據(jù)質(zhì)量的量化考核,保障主數(shù)據(jù)的安全、可靠。
4.主數(shù)據(jù)應(yīng)用管理
主數(shù)據(jù)應(yīng)用管理是保障主數(shù)據(jù)落地和數(shù)據(jù)質(zhì)量非常重要的一環(huán)。主數(shù)據(jù)應(yīng)用主要包含三部分內(nèi)容:明確管理要求、實(shí)施有效的管理、強(qiáng)化保障服務(wù)。
(1)明確管理要求:制定主數(shù)據(jù)應(yīng)用管理制度規(guī)范,對(duì)主數(shù)據(jù)的應(yīng)用范圍、應(yīng)用規(guī)則、管理要求和考核標(biāo)準(zhǔn)做出明確規(guī)定,并以此為依據(jù),對(duì)主數(shù)據(jù)應(yīng)用進(jìn)行有效管理。
(2)實(shí)施有效管理:主數(shù)據(jù)應(yīng)用點(diǎn)多、面廣、線長,管理難度很大,要實(shí)施有效管理,就必須要有健全的制度和可行的手段,在關(guān)鍵控制節(jié)點(diǎn)實(shí)施重點(diǎn)管理。
(3)強(qiáng)化服務(wù)保障:依靠便捷、可靠的主數(shù)據(jù)服務(wù)為主數(shù)據(jù)應(yīng)用提供保障,包括主數(shù)據(jù)查詢、主數(shù)據(jù)同步、主數(shù)據(jù)申請(qǐng)和主數(shù)據(jù)調(diào)用。有條件的單位可將主數(shù)據(jù)服務(wù)深入到業(yè)務(wù)流程,從業(yè)務(wù)端發(fā)起請(qǐng)求,驅(qū)動(dòng)主數(shù)據(jù)管理和服務(wù),形成管理和應(yīng)用的有機(jī)協(xié)同。
5.主數(shù)據(jù)管理評(píng)價(jià)
主數(shù)據(jù)管理評(píng)價(jià)是用來評(píng)估及考核主數(shù)據(jù)相關(guān)責(zé)任人職責(zé)的履行情況及數(shù)據(jù)管理標(biāo)準(zhǔn)和數(shù)據(jù)政策的執(zhí)行情況,通過建立定性或定量的主數(shù)據(jù)管理評(píng)價(jià)考核指標(biāo),加強(qiáng)企業(yè)對(duì)主數(shù)據(jù)管理相關(guān)責(zé)任、標(biāo)準(zhǔn)與政策執(zhí)行的掌控能力。
主數(shù)據(jù)管理評(píng)價(jià)指標(biāo)從管理標(biāo)準(zhǔn)、數(shù)據(jù)認(rèn)責(zé)和數(shù)據(jù)政策三個(gè)角度考慮,
由數(shù)據(jù)所有人與數(shù)據(jù)認(rèn)責(zé)人共同確定,定義一系列的衡量指標(biāo)和規(guī)則,分一方面落實(shí)和檢查主數(shù)據(jù)的應(yīng)用情況,另一方面考察和評(píng)估主數(shù)據(jù)管理、主數(shù)據(jù)標(biāo)準(zhǔn)、主數(shù)據(jù)質(zhì)量的執(zhí)行情況。
為了進(jìn)一步保障主數(shù)據(jù)管理工具成功實(shí)施和有效運(yùn)行,必須做到組織、職能、責(zé)任、人員的四落實(shí)。制定涉及到主數(shù)據(jù)管理的各個(gè)環(huán)節(jié)、組織、人員的一套績效考核辦法,明確各組織部門的職責(zé)與分工。
主數(shù)據(jù)項(xiàng)目實(shí)施要點(diǎn)與步驟
下面和大家分享一個(gè)主數(shù)據(jù)項(xiàng)目管理的實(shí)施框架。這個(gè)框架其實(shí)分成4大部分,第一個(gè)就是現(xiàn)狀分析與評(píng)估,第二個(gè)就是體系的規(guī)劃,第三個(gè)就是實(shí)施方案,最后就是一個(gè)平臺(tái)落地部署的工作。
在具體執(zhí)行過程中,主數(shù)據(jù)項(xiàng)目總體上遵循常規(guī)項(xiàng)目6大步驟:啟動(dòng)、計(jì)劃、需求分析與設(shè)計(jì)、實(shí)現(xiàn)、測試驗(yàn)收、售后運(yùn)維。這里我們主要重點(diǎn)介紹下實(shí)現(xiàn)階段的內(nèi)容,測試驗(yàn)收和售后運(yùn)維就不多做講解。
1.啟動(dòng)階段
啟動(dòng)階段主要包括識(shí)別項(xiàng)目目標(biāo)、組建項(xiàng)目團(tuán)隊(duì)、召開項(xiàng)目啟動(dòng)會(huì)。
識(shí)別項(xiàng)目目標(biāo)就是要做一個(gè)主數(shù)據(jù)識(shí)別,主數(shù)據(jù)識(shí)別可以從兩方面去考慮,第一個(gè)就是通過一些已知的分析維度,以及業(yè)務(wù)影響程度等,還有數(shù)據(jù)共享程度比較高的,或者說數(shù)據(jù)需求比較迫切的,我們都可以將其納入主數(shù)據(jù)范圍。除此以外,還可以通過一些成熟的工具做一些分析,通過這樣的工具去對(duì)接業(yè)務(wù)系統(tǒng),從而識(shí)別企業(yè)到底有哪些主數(shù)據(jù),然后這些數(shù)據(jù)分布在哪里。
第二個(gè)就是組建項(xiàng)目團(tuán)隊(duì),項(xiàng)目管理也是這樣去組建團(tuán)隊(duì)的,比如項(xiàng)目領(lǐng)導(dǎo)小組有項(xiàng)目總監(jiān)、項(xiàng)目經(jīng)理,還有一些各種不同的角色的實(shí)施人員,除此以外,還配備一些專家的團(tuán)隊(duì)做支持。
2.計(jì)劃階段
計(jì)劃階段我們主要關(guān)心兩部分內(nèi)容,第一是實(shí)施落地的工作,第二是主數(shù)據(jù)集成開發(fā)的工作。實(shí)施落地工作按照我們前文中說的框架體系去做即可。
這里重點(diǎn)說一下集成開發(fā)這塊的工作。我們?cè)谛枨笳{(diào)研階段,以及咨詢規(guī)劃階段,了解了業(yè)務(wù)主數(shù)據(jù)來源于哪些系統(tǒng),最后用于哪些系統(tǒng),以及分發(fā)到哪些系統(tǒng);以及我們的平臺(tái)如何與業(yè)務(wù)系統(tǒng)做對(duì)接,是用表對(duì)接,還是接口對(duì)接;同時(shí)整個(gè)實(shí)施過程中還要做一些并行的工作,因此前期要去了解收集這樣的一些信息,這樣才能讓整個(gè)項(xiàng)目的進(jìn)行的比較順利。
3.需求與設(shè)計(jì)階段
這一階段也稱為需求調(diào)研階段,我們主要是通過訪談問卷,或者面對(duì)面的交流以及一些數(shù)據(jù)抽取的手段去獲取企業(yè)主數(shù)據(jù)的信息和現(xiàn)狀。
除了需求調(diào)研,還有一個(gè)重要的板塊是組織架構(gòu)和管理制度設(shè)計(jì),這里采取三層的架構(gòu)——決策層、管理層、執(zhí)行層。
另外主數(shù)據(jù)的建設(shè)并不是IT部門或者信息科技部門就能決定的,正如前文中提到的主數(shù)據(jù)含有業(yè)務(wù)實(shí)體屬性,需要在業(yè)務(wù)系統(tǒng)里被使用,因此一定需要業(yè)務(wù)負(fù)責(zé)人的參與,一起來共同推進(jìn)。
而對(duì)執(zhí)行層來說,主要是需要和業(yè)務(wù)部門一起定義數(shù)據(jù)的標(biāo)準(zhǔn)模型分類,共同推進(jìn)。當(dāng)然在主數(shù)據(jù)平臺(tái)管理過程也需要信息管理員來對(duì)數(shù)據(jù)進(jìn)行審批等,以上這些角色都是在整個(gè)組織架構(gòu)建設(shè)時(shí)提前定義好的。
4.實(shí)現(xiàn)階段
在具體的實(shí)現(xiàn)階段有10項(xiàng)工作要去做,這些工作可以并行考慮,包括數(shù)據(jù)標(biāo)準(zhǔn)化,分類編碼屬性管控、流程整合以及切換策略等等,下面我們具體來看看。
(1)主數(shù)據(jù)標(biāo)準(zhǔn)化體系
以物料為例,完整的物料標(biāo)準(zhǔn)化體系主要包括兩大部分內(nèi)容,一是物料數(shù)據(jù)標(biāo)準(zhǔn)的制定,二是支撐物料數(shù)據(jù)標(biāo)準(zhǔn)化管理相關(guān)的組織機(jī)制與技術(shù)平臺(tái)等基礎(chǔ)能力的建設(shè)。在此體系下確保逐步改善物資數(shù)據(jù)質(zhì)量,最終實(shí)現(xiàn)標(biāo)準(zhǔn)化。
(2)分類設(shè)計(jì)原則
分類設(shè)計(jì)的原則主要有4點(diǎn),第一是不重不漏;第二是粗細(xì)顆粒度要合理;第三是要滿足業(yè)務(wù)需求;第四是要符合行業(yè)習(xí)慣。
這里有一個(gè)很重要點(diǎn)是,在整個(gè)分類設(shè)計(jì)的過程中,實(shí)施人員要反復(fù)與客戶進(jìn)行確認(rèn)。因?yàn)橐坏┓诸悰]有做好,后續(xù)可能導(dǎo)致大量的重復(fù)錄入,并產(chǎn)生很大的影響。這里有一個(gè)分類的示例,大家可以參考下:
(3)編碼設(shè)計(jì)
編碼設(shè)計(jì)也有一些原則需要去遵守,比如編碼要有全局性,唯一性、適度性、靈活性、擴(kuò)展性等。對(duì)于唯一性與擴(kuò)展性,換句話說,當(dāng)一些新的物料數(shù)據(jù)進(jìn)來以后,我們能方便添加更多的編碼進(jìn)來,而此時(shí)的編碼也需要是唯一的,也就主數(shù)據(jù)編碼只能對(duì)應(yīng)一個(gè)確定的實(shí)體對(duì)象。
這里的編碼通常有三種方式,即順序碼、層次碼、組合碼,他們各有優(yōu)缺點(diǎn):
編碼制定的過程也是需要進(jìn)行大量的討論和確認(rèn),才能形成一個(gè)好的編碼方案。在現(xiàn)實(shí)中,正是因?yàn)槠髽I(yè)編碼不統(tǒng)一、造成了后續(xù)采購以及存儲(chǔ)等一系列問題,所以編碼方案一旦確定出來,實(shí)施人員就需要與客戶的高層進(jìn)行確認(rèn)。編碼結(jié)構(gòu)示例,它是一個(gè)組合碼。
(4)屬性標(biāo)準(zhǔn)梳理
屬性標(biāo)準(zhǔn)梳理我們可以去參考一些標(biāo)準(zhǔn),比如外部的國際標(biāo)準(zhǔn)、國家標(biāo)準(zhǔn);業(yè)務(wù)層面上的行業(yè)標(biāo)準(zhǔn)和制度要求等;另外在進(jìn)行屬性梳理時(shí),我們HIA可以從源系統(tǒng)中參考數(shù)據(jù)字典,查看一些代碼表;最后也可以借鑒一些好的實(shí)踐經(jīng)驗(yàn)與成果來進(jìn)行屬性標(biāo)準(zhǔn)的梳理。
在進(jìn)行主數(shù)據(jù)屬性標(biāo)準(zhǔn)梳理時(shí),我們可以從業(yè)務(wù)標(biāo)準(zhǔn)、技術(shù)標(biāo)準(zhǔn)、管理標(biāo)準(zhǔn)三個(gè)層面來進(jìn)行。比如業(yè)務(wù)層面,需要理解屬性到底屬于哪一個(gè)分類,屬性名稱是什么,有怎樣的業(yè)務(wù)規(guī)則;技術(shù)層面,可以定義屬性,以及類型長度精度等;管理層面,可以梳理誰來創(chuàng)建,誰來使用,誰在維度等,提前將其確定出來,方便后續(xù)制定這樣的制度。
(5)管控流程設(shè)計(jì)
數(shù)據(jù)之所以會(huì)存在很多問題,以及需要推翻重建,很多時(shí)候是在業(yè)務(wù)系統(tǒng)建設(shè)過中沒有進(jìn)行流程審核以及校驗(yàn)。因此我們?cè)谶M(jìn)行主數(shù)據(jù)管理過程中,需要重視管控流程設(shè)計(jì)。
比如,當(dāng)定義了兩種模型,在模型的新增、變更和失效時(shí),是否有流程做一些控制;在進(jìn)行數(shù)據(jù)層面的管理工作時(shí),是否有流程能能監(jiān)測數(shù)據(jù)的變更、凍結(jié)或者失效。另外,我們可能還會(huì)涉及一些質(zhì)檢和審批,在審批沒有問題,才能去做分發(fā)。
(6)歷史數(shù)據(jù)整合、清洗
主數(shù)據(jù)清理策略主要分成6個(gè)步驟,分別是數(shù)據(jù)接入、初步標(biāo)記、分類清理、先分后合、整理清洗、檢查反饋。
①第一步:數(shù)據(jù)接入,通過接口或者ETL工具去接入歷史的主數(shù)據(jù);
②第二步:看數(shù)據(jù)存在什么問題,是否有一些屬性沒有填寫,或者說分類不對(duì)需要做初步的標(biāo)記;
③第三步:如果存在問題,就需要將分類標(biāo)記的數(shù)據(jù)分配到不同的業(yè)務(wù)部門進(jìn)行清洗,由于業(yè)務(wù)人員來進(jìn)行整理;
④第四步:先分后合,對(duì)分類清理完的數(shù)據(jù)進(jìn)行合并匯總檢查;
⑤第五步:整體清理,按照整體業(yè)務(wù)邏輯進(jìn)行清理,如果數(shù)據(jù)量比較大,可以借助工具進(jìn)行批量處理,并將處理完成的數(shù)據(jù)做好整合;
⑥第六步:檢查反饋。
(7)數(shù)據(jù)切換策略
這里提供三種切換的策略,第一種是完全采用主數(shù)據(jù)管理平臺(tái);第二種是通過映射實(shí)現(xiàn)與舊數(shù)據(jù)的對(duì)接;第三種是通過映射和逐步數(shù)據(jù)切換的方式開展,逐步實(shí)現(xiàn)所有系統(tǒng)都使用統(tǒng)一的主數(shù)據(jù)
。
(8)數(shù)據(jù)生產(chǎn)與維護(hù)策略
在數(shù)據(jù)生產(chǎn)和維護(hù)方面有兩種策略,一種是集中式,即所有的數(shù)據(jù)新增、變更、刪除以及管理全過程都在主數(shù)據(jù)管理平臺(tái)上來進(jìn)行,統(tǒng)一的管理,統(tǒng)一的分發(fā);另一種是分布式,即通過在某個(gè)單一的業(yè)務(wù)系統(tǒng)里去對(duì)某一類的主數(shù)據(jù),進(jìn)而做新增、變更與刪除,然后主數(shù)據(jù)平臺(tái)及時(shí)去同步業(yè)務(wù)系統(tǒng)的數(shù)據(jù),并向企業(yè)業(yè)務(wù)系統(tǒng)去做分發(fā),這時(shí)的主數(shù)據(jù)平臺(tái)就起到一個(gè)中間橋梁的作用。
分布式管理比較適合于單一可信的來源,且不受其他業(yè)務(wù)系統(tǒng)影響的主數(shù)據(jù),比如人力數(shù)據(jù),OA系統(tǒng)在各自的系統(tǒng)里維護(hù)的比較好,數(shù)據(jù)質(zhì)量也比較高,就比較適合分布式的管理方式。
(9)主數(shù)據(jù)分發(fā)策略
主數(shù)據(jù)的分發(fā)方式有三種,第一種是通過接口對(duì)接與分發(fā),當(dāng)企業(yè)業(yè)務(wù)系統(tǒng)可以做一些改造,可以對(duì)接ESB。這種方式是由業(yè)務(wù)系統(tǒng)主動(dòng)獲取數(shù)據(jù),適用于業(yè)務(wù)系統(tǒng)對(duì)主數(shù)據(jù)實(shí)時(shí)性要求比較高的情況。
第二種是通過交換任務(wù)分發(fā),比較適合批量數(shù)據(jù)的獲取,比如前期主數(shù)據(jù)管理管理維護(hù)好以后,通過批量的方式把數(shù)據(jù)推送到某個(gè)業(yè)務(wù)系統(tǒng)中去。這種方式支持定時(shí)任務(wù)執(zhí)行,適用于業(yè)務(wù)系統(tǒng)需要批量獲取主數(shù)據(jù)的情況。
第三種是通過文件分發(fā),即通過離線文件的方式分發(fā)數(shù)據(jù),適用于系統(tǒng)繁忙情況下的批量分發(fā)。如億信華辰的主數(shù)據(jù)管理平臺(tái)的分發(fā)效果,提供了大量的接口,還支持自定義接口,以及多個(gè)表關(guān)聯(lián)后的數(shù)據(jù)再做分發(fā)等,都能借助平臺(tái)實(shí)現(xiàn),除此以外,我們還有分發(fā)的配置,支持接口庫表,同時(shí)還有一些數(shù)據(jù)集成的工具,可以設(shè)置一些任務(wù),以任務(wù)的方式來做分發(fā)。
(10)主數(shù)據(jù)集成
主數(shù)據(jù)管理平臺(tái)還可以通過工具與各個(gè)業(yè)務(wù)系統(tǒng)去做對(duì)接集成,包括主動(dòng)的方式去推數(shù)據(jù),也包括被動(dòng)的方式去拉數(shù)據(jù),至于怎么去做,同步或者異步都可以,還可以做日志的預(yù)警。
分享到微信 ×
打開微信,點(diǎn)擊底部的“發(fā)現(xiàn)”,
使用“掃一掃”即可將網(wǎng)頁分享至朋友圈。