一、大數(shù)據(jù)時(shí)代還需要數(shù)據(jù)治理嗎？

1、數(shù)據(jù)平臺(tái)發(fā)展過(guò)程中隨處可見(jiàn)的數(shù)據(jù)問(wèn)題

大數(shù)據(jù)不是憑空而來(lái)，1981年第一個(gè)數(shù)據(jù)倉(cāng)庫(kù)誕生，到現(xiàn)在已經(jīng)有了近40年的歷史，相對(duì)數(shù)據(jù)倉(cāng)庫(kù)來(lái)說(shuō)我還是個(gè)年輕人。而國(guó)內(nèi)企業(yè)數(shù)據(jù)平臺(tái)的建設(shè)大概從90年代末就開(kāi)始了，從第一代架構(gòu)出現(xiàn)到現(xiàn)在已經(jīng)經(jīng)歷了近20年的時(shí)間。

在這20年的時(shí)間里，國(guó)內(nèi)數(shù)據(jù)平臺(tái)實(shí)施者可以說(shuō)是受盡折磨，數(shù)據(jù)項(xiàng)目一直不受待見(jiàn)，是出了名的臟活累活。

可以說(shuō)，忽視數(shù)據(jù)治理給數(shù)據(jù)平臺(tái)建設(shè)帶來(lái)了不少問(wèn)題。隨處可見(jiàn)的數(shù)據(jù)不統(tǒng)一，難以提升的數(shù)據(jù)質(zhì)量，難以完成的數(shù)據(jù)模型梳理等源源不斷的基礎(chǔ)性數(shù)據(jù)問(wèn)題，限制了數(shù)據(jù)平臺(tái)發(fā)展，導(dǎo)致數(shù)據(jù)應(yīng)用不能在商業(yè)上快速展示效果。

舉一個(gè)典型商業(yè)智能應(yīng)用的例子，管理駕駛艙可能很多朋友都聽(tīng)說(shuō)過(guò)，很多企業(yè)建設(shè)了管理駕駛艙，但是建設(shè)完之后往往成為擺設(shè)，只有當(dāng)領(lǐng)導(dǎo)需要看的時(shí)候，大家才去拼命改數(shù)據(jù)。

為什么數(shù)據(jù)平臺(tái)的建設(shè)遇到這么多“坎”，而且難以真正發(fā)揮其商業(yè)價(jià)值？其實(shí)核心問(wèn)題還是數(shù)據(jù)本身不統(tǒng)一，數(shù)據(jù)內(nèi)容準(zhǔn)確度不高。

2、數(shù)據(jù)治理逐漸受到各行業(yè)認(rèn)識(shí)

我國(guó)最早意識(shí)到數(shù)據(jù)治理重要性的行業(yè)銀行是金融行業(yè)。由于對(duì)數(shù)據(jù)的強(qiáng)依賴(lài)，金融業(yè)一直非常重視數(shù)據(jù)平臺(tái)的建設(shè)，經(jīng)過(guò)幾代數(shù)據(jù)平臺(tái)的驗(yàn)證，發(fā)現(xiàn)數(shù)據(jù)治理是平臺(tái)建設(shè)的主要限制因素，而且隨著投資和建設(shè)的投入增加，對(duì)數(shù)據(jù)治理的重要性的認(rèn)識(shí)也越來(lái)越深刻。

人民銀行與銀監(jiān)會(huì)也非常重視數(shù)據(jù)治理，從08年開(kāi)始，在全國(guó)銀行業(yè)推行統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，控制行業(yè)的數(shù)據(jù)質(zhì)量。工行、建行、國(guó)開(kāi)等大型銀行，對(duì)數(shù)據(jù)治理都非常重視。08年前，我們與國(guó)開(kāi)一起開(kāi)始了數(shù)據(jù)治理的建設(shè)，下圖展示的就是國(guó)開(kāi)銀行針對(duì)數(shù)據(jù)全生命周期的數(shù)據(jù)管控。

如今各行業(yè)都開(kāi)始了大數(shù)據(jù)平臺(tái)的建設(shè)，希望利用大數(shù)據(jù)的能力，來(lái)實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型。大數(shù)據(jù)平臺(tái)的建設(shè)本質(zhì)上還是數(shù)據(jù)的建設(shè)，傳統(tǒng)數(shù)據(jù)平臺(tái)碰到的所有問(wèn)題大數(shù)據(jù)平臺(tái)都有可能碰到，由于數(shù)據(jù)量級(jí)的變化，大數(shù)據(jù)平臺(tái)必然還會(huì)產(chǎn)生新的問(wèn)題。

3、大數(shù)據(jù)時(shí)代下需要新一代的數(shù)據(jù)治理能力

目前大數(shù)據(jù)平臺(tái)的突出問(wèn)題主要體現(xiàn)在以下四方面：

數(shù)據(jù)不可知：用戶(hù)不知道大數(shù)據(jù)平臺(tái)中有哪些數(shù)據(jù)，也不知道這些數(shù)據(jù)和業(yè)務(wù)的關(guān)系是什么，雖然意識(shí)到了大數(shù)據(jù)的重要性，但平臺(tái)中有沒(méi)有能解決自己所面臨業(yè)務(wù)問(wèn)題的關(guān)鍵數(shù)據(jù)？該到哪里尋找這些數(shù)據(jù)？

數(shù)據(jù)不可控：數(shù)據(jù)不可控是從傳統(tǒng)數(shù)據(jù)平臺(tái)開(kāi)始就一直存在的問(wèn)題，在大數(shù)據(jù)時(shí)代表現(xiàn)得更為明顯。沒(méi)有統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)導(dǎo)致數(shù)據(jù)難以集成和統(tǒng)一，沒(méi)有質(zhì)量控制導(dǎo)致海量數(shù)據(jù)因質(zhì)量過(guò)低而難以被利用，沒(méi)有能有效管理整個(gè)大數(shù)據(jù)平臺(tái)的管理流程。

數(shù)據(jù)不可?。河脩?hù)即使知道自己業(yè)務(wù)所需要的是哪些數(shù)據(jù)，也不能便捷自助地拿到數(shù)據(jù)，相反，獲取數(shù)據(jù)需要很長(zhǎng)的開(kāi)發(fā)過(guò)程，導(dǎo)致業(yè)務(wù)分析的需求難以被快速滿(mǎn)足，而在大數(shù)據(jù)時(shí)代，業(yè)務(wù)追求的是針對(duì)某個(gè)業(yè)務(wù)問(wèn)題的快速分析，這樣漫長(zhǎng)的需求響應(yīng)時(shí)間是難以滿(mǎn)足業(yè)務(wù)需求的。

數(shù)據(jù)不可聯(lián)：大數(shù)據(jù)時(shí)代，企業(yè)擁有著海量數(shù)據(jù)，但企業(yè)數(shù)據(jù)知識(shí)之間的關(guān)聯(lián)還比較弱，沒(méi)有把數(shù)據(jù)和知識(shí)體系關(guān)聯(lián)起來(lái)，企業(yè)員工難以做到數(shù)據(jù)與知識(shí)之間的快速轉(zhuǎn)換，不能對(duì)數(shù)據(jù)進(jìn)行自助的的探索和挖掘，數(shù)據(jù)的深層價(jià)值難以體現(xiàn)。

通過(guò)分析以上四類(lèi)問(wèn)題，我們發(fā)現(xiàn)傳統(tǒng)數(shù)據(jù)平臺(tái)面臨的問(wèn)題，在大數(shù)據(jù)時(shí)代不僅沒(méi)有消失，還不斷涌現(xiàn)出新的問(wèn)題，傳統(tǒng)的數(shù)據(jù)治理需要提升能力，來(lái)解決大數(shù)據(jù)平臺(tái)建設(shè)過(guò)程中的這些問(wèn)題。

在傳統(tǒng)數(shù)據(jù)平臺(tái)階段，數(shù)據(jù)治理的目標(biāo)主要是做管控，為數(shù)據(jù)部門(mén)建立一個(gè)的治理工作環(huán)境，包括標(biāo)準(zhǔn)、質(zhì)量等。在大數(shù)據(jù)平臺(tái)階段，用戶(hù)對(duì)數(shù)據(jù)的需求持續(xù)增長(zhǎng)，用戶(hù)范圍從數(shù)據(jù)部門(mén)擴(kuò)展到全企業(yè)，數(shù)據(jù)治理不能再只是面向數(shù)據(jù)部門(mén)了，需要成為面向全企業(yè)用戶(hù)的工作環(huán)境，需要以全企業(yè)用戶(hù)為中心，從給用戶(hù)提供服務(wù)的角度，管理好數(shù)據(jù)的同時(shí)為用戶(hù)提供自助獲得大數(shù)據(jù)的能力，幫助企業(yè)完成數(shù)字化轉(zhuǎn)型。