一、大數(shù)據(jù)時代還需要數(shù)據(jù)治理嗎？

1、數(shù)據(jù)平臺發(fā)展過程中隨處可見的數(shù)據(jù)問題

大數(shù)據(jù)不是憑空而來，1981年第一個數(shù)據(jù)倉庫誕生，到現(xiàn)在已經(jīng)有了近40年的歷史，相對數(shù)據(jù)倉庫來說我還是個年輕人。而國內(nèi)企業(yè)數(shù)據(jù)平臺的建設(shè)大概從90年代末就開始了，從第一代架構(gòu)出現(xiàn)到現(xiàn)在已經(jīng)經(jīng)歷了近20年的時間。

在這20年的時間里，國內(nèi)數(shù)據(jù)平臺實施者可以說是受盡折磨，數(shù)據(jù)項目一直不受待見，是出了名的臟活累活。

可以說，忽視數(shù)據(jù)治理給數(shù)據(jù)平臺建設(shè)帶來了不少問題。隨處可見的數(shù)據(jù)不統(tǒng)一，難以提升的數(shù)據(jù)質(zhì)量，難以完成的數(shù)據(jù)模型梳理等源源不斷的基礎(chǔ)性數(shù)據(jù)問題，限制了數(shù)據(jù)平臺發(fā)展，導(dǎo)致數(shù)據(jù)應(yīng)用不能在商業(yè)上快速展示效果。

舉一個典型商業(yè)智能應(yīng)用的例子，管理駕駛艙可能很多朋友都聽說過，很多企業(yè)建設(shè)了管理駕駛艙，但是建設(shè)完之后往往成為擺設(shè)，只有當(dāng)領(lǐng)導(dǎo)需要看的時候，大家才去拼命改數(shù)據(jù)。

為什么數(shù)據(jù)平臺的建設(shè)遇到這么多“坎”，而且難以真正發(fā)揮其商業(yè)價值？其實核心問題還是數(shù)據(jù)本身不統(tǒng)一，數(shù)據(jù)內(nèi)容準(zhǔn)確度不高。

2、數(shù)據(jù)治理逐漸受到各行業(yè)認(rèn)識

我國最早意識到數(shù)據(jù)治理重要性的行業(yè)銀行是金融行業(yè)。由于對數(shù)據(jù)的強依賴，金融業(yè)一直非常重視數(shù)據(jù)平臺的建設(shè)，經(jīng)過幾代數(shù)據(jù)平臺的驗證，發(fā)現(xiàn)數(shù)據(jù)治理是平臺建設(shè)的主要限制因素，而且隨著投資和建設(shè)的投入增加，對數(shù)據(jù)治理的重要性的認(rèn)識也越來越深刻。

人民銀行與銀監(jiān)會也非常重視數(shù)據(jù)治理，從08年開始，在全國銀行業(yè)推行統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，控制行業(yè)的數(shù)據(jù)質(zhì)量。工行、建行、國開等大型銀行，對數(shù)據(jù)治理都非常重視。08年前，我們與國開一起開始了數(shù)據(jù)治理的建設(shè)，下圖展示的就是國開銀行針對數(shù)據(jù)全生命周期的數(shù)據(jù)管控。

如今各行業(yè)都開始了大數(shù)據(jù)平臺的建設(shè)，希望利用大數(shù)據(jù)的能力，來實現(xiàn)數(shù)字化轉(zhuǎn)型。大數(shù)據(jù)平臺的建設(shè)本質(zhì)上還是數(shù)據(jù)的建設(shè)，傳統(tǒng)數(shù)據(jù)平臺碰到的所有問題大數(shù)據(jù)平臺都有可能碰到，由于數(shù)據(jù)量級的變化，大數(shù)據(jù)平臺必然還會產(chǎn)生新的問題。

3、大數(shù)據(jù)時代下需要新一代的數(shù)據(jù)治理能力

目前大數(shù)據(jù)平臺的突出問題主要體現(xiàn)在以下四方面：

數(shù)據(jù)不可知：用戶不知道大數(shù)據(jù)平臺中有哪些數(shù)據(jù)，也不知道這些數(shù)據(jù)和業(yè)務(wù)的關(guān)系是什么，雖然意識到了大數(shù)據(jù)的重要性，但平臺中有沒有能解決自己所面臨業(yè)務(wù)問題的關(guān)鍵數(shù)據(jù)？該到哪里尋找這些數(shù)據(jù)？

數(shù)據(jù)不可控：數(shù)據(jù)不可控是從傳統(tǒng)數(shù)據(jù)平臺開始就一直存在的問題，在大數(shù)據(jù)時代表現(xiàn)得更為明顯。沒有統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)導(dǎo)致數(shù)據(jù)難以集成和統(tǒng)一，沒有質(zhì)量控制導(dǎo)致海量數(shù)據(jù)因質(zhì)量過低而難以被利用，沒有能有效管理整個大數(shù)據(jù)平臺的管理流程。

數(shù)據(jù)不可?。河脩艏词怪雷约簶I(yè)務(wù)所需要的是哪些數(shù)據(jù)，也不能便捷自助地拿到數(shù)據(jù)，相反，獲取數(shù)據(jù)需要很長的開發(fā)過程，導(dǎo)致業(yè)務(wù)分析的需求難以被快速滿足，而在大數(shù)據(jù)時代，業(yè)務(wù)追求的是針對某個業(yè)務(wù)問題的快速分析，這樣漫長的需求響應(yīng)時間是難以滿足業(yè)務(wù)需求的。

數(shù)據(jù)不可聯(lián)：大數(shù)據(jù)時代，企業(yè)擁有著海量數(shù)據(jù)，但企業(yè)數(shù)據(jù)知識之間的關(guān)聯(lián)還比較弱，沒有把數(shù)據(jù)和知識體系關(guān)聯(lián)起來，企業(yè)員工難以做到數(shù)據(jù)與知識之間的快速轉(zhuǎn)換，不能對數(shù)據(jù)進行自助的的探索和挖掘，數(shù)據(jù)的深層價值難以體現(xiàn)。

通過分析以上四類問題，我們發(fā)現(xiàn)傳統(tǒng)數(shù)據(jù)平臺面臨的問題，在大數(shù)據(jù)時代不僅沒有消失，還不斷涌現(xiàn)出新的問題，傳統(tǒng)的數(shù)據(jù)治理需要提升能力，來解決大數(shù)據(jù)平臺建設(shè)過程中的這些問題。

在傳統(tǒng)數(shù)據(jù)平臺階段，數(shù)據(jù)治理的目標(biāo)主要是做管控，為數(shù)據(jù)部門建立一個的治理工作環(huán)境，包括標(biāo)準(zhǔn)、質(zhì)量等。在大數(shù)據(jù)平臺階段，用戶對數(shù)據(jù)的需求持續(xù)增長，用戶范圍從數(shù)據(jù)部門擴展到全企業(yè)，數(shù)據(jù)治理不能再只是面向數(shù)據(jù)部門了，需要成為面向全企業(yè)用戶的工作環(huán)境，需要以全企業(yè)用戶為中心，從給用戶提供服務(wù)的角度，管理好數(shù)據(jù)的同時為用戶提供自助獲得大數(shù)據(jù)的能力，幫助企業(yè)完成數(shù)字化轉(zhuǎn)型。