近年來,數(shù)據(jù)及其價值被社會各界廣泛討論,儼然成為最為熱門話題之一。
事實上,關于數(shù)據(jù)價值的這一波討論,看似偶然,其實必然。隨著產業(yè)互聯(lián)網(wǎng)的深入,以及《關于構建更加完善的要素市場化配置體制機制的意見》中首次將數(shù)據(jù)寫入生產要素,傳統(tǒng)企業(yè)逐漸意識到數(shù)據(jù)形成資產化之后所帶來的巨大價值。
因此,如何釋放數(shù)據(jù)生產力就成為眾多企業(yè)數(shù)字化轉型中的一道必答題。如今,越來越多傳統(tǒng)企業(yè)著手構建數(shù)據(jù)資產體系,希望把數(shù)據(jù)“用起來”和“用好”。但這絕非易事,因為如今數(shù)據(jù)從生產到消費的鏈路愈發(fā)復雜,傳統(tǒng)的理念和方法論亟待突破。
如何才能打破局面?為此,網(wǎng)易數(shù)帆帶來了突破性的“數(shù)據(jù)治理與開發(fā)一體化”理念以及數(shù)據(jù)生產力模型,帶來了“人人用數(shù)據(jù),時時用數(shù)據(jù)”的最優(yōu)解。
從“有數(shù)”到“用數(shù)”為何如此之難
不可否認,經過多年的“大數(shù)據(jù)”概念教育,很多行業(yè)如今都異常重視數(shù)據(jù)的采集,有些企業(yè)甚至都擁有龐大、且豐富的數(shù)據(jù)集,卻無法很好地實現(xiàn)數(shù)據(jù)驅動日常的決策、運營和創(chuàng)新。
造成這種局面的核心原因主要有三個方面。
首先,業(yè)務場景發(fā)生巨大改變,基于數(shù)據(jù)驅動的業(yè)務場景正在迅速興起,徹底改變了數(shù)據(jù)的使用范式。
其次,新場景帶來了數(shù)據(jù)量、數(shù)據(jù)類型不斷走向豐富,與數(shù)據(jù)處理、分析相關的技術也是層出不窮、應接不暇,從數(shù)據(jù)庫、數(shù)據(jù)倉庫,到數(shù)據(jù)中臺、數(shù)據(jù)湖,甚至現(xiàn)在熱門的湖倉一體、DataFabric,大部分企業(yè)并無掌控新技術的能力。
第三,數(shù)據(jù)消費人群規(guī)模、類型今非昔比,任何員工都可能是業(yè)務中的數(shù)據(jù)重度消費者,但大部分企業(yè)目前在組織架構、數(shù)據(jù)文化等方面尚未調整到位,不足以支撐起企業(yè)“用數(shù)”和“用好數(shù)”的需求。
面對當前數(shù)據(jù)市場里越來越旺盛的需求,當前市場中卻處于比較尷尬的局面。“市場不缺供應商,但卻鮮有一套合理、經過驗證的方法論能夠幫助用戶把數(shù)據(jù)資產用好。”網(wǎng)易數(shù)帆大數(shù)據(jù)產品線總經理余利華如是說,“很多企業(yè)通常是走一步看一步,先建設再說,缺少整體和長遠的考慮。”
為此,網(wǎng)易數(shù)帆基于超過300+行業(yè)頭部客戶、10+行業(yè)覆蓋的實踐上,針對目前大部分企業(yè)在“數(shù)據(jù)治理”和“數(shù)據(jù)開發(fā)”等領域遇到的挑戰(zhàn),在今年的網(wǎng)易數(shù)字+大會上推出了數(shù)據(jù)生產力模型和“數(shù)據(jù)治理與開發(fā)一體化”理念,為釋放數(shù)據(jù)生產力尋找到一條可行之路。
數(shù)據(jù)開發(fā)治理一體化讓“用數(shù)”有解
“數(shù)據(jù)治理”目的是實現(xiàn)數(shù)據(jù)資產安全可控、質量高和容易消費,乃釋放數(shù)據(jù)生產力的基礎前提。
如果說數(shù)據(jù)如水,滋潤數(shù)字經濟時代萬物生長;那么“數(shù)據(jù)治理”則恰如治水,釋放數(shù)據(jù)生產力或造成數(shù)據(jù)泛濫均維系于此,其重要性堪比數(shù)據(jù)本身。
不過,“數(shù)據(jù)治理”擁有多年歷史,并非新鮮事物。但隨著千行百業(yè)數(shù)字化轉型的深入,用戶數(shù)據(jù)驅動和數(shù)據(jù)創(chuàng)新的需求亦產生重大轉變,讓數(shù)據(jù)治理的復雜性今非昔比,傳統(tǒng)的數(shù)據(jù)治理理念、方法論很難適應需求的變化趨勢。余利華認為:“多數(shù)情況下,企業(yè)對于數(shù)據(jù)治理并無規(guī)劃,并且治理與開發(fā)脫節(jié),容易陷入運動式治理和惡性循環(huán)。”
具體來看,很多企業(yè)在數(shù)據(jù)治理領域首先采取的是先污染后治理,開發(fā)與治理體系割裂;當遇到數(shù)據(jù)問題越來越多之后,則通過運動式治理來解決數(shù)據(jù)問題,治理效果無法有效衡量和持續(xù)反饋;并且很多企業(yè)的數(shù)據(jù)治理范圍往往局限在湖內,無法對大量湖外數(shù)據(jù)進行治理;最終形成的數(shù)據(jù)資產,往往存在找不到、看不懂和信不過的尷尬情況。
“造成這種情況的核心原因在于,數(shù)據(jù)治理是旁路系統(tǒng),上不能深入到應用環(huán)境,下達不到開發(fā)環(huán)節(jié)。”余利華坦言道。
為此,圍繞數(shù)據(jù)治理與數(shù)據(jù)開發(fā)脫節(jié)這個難啃的硬骨頭,網(wǎng)易數(shù)帆的數(shù)據(jù)生產力方法論提出了“數(shù)據(jù)治理開發(fā)一體化”理念,即“先設計后開發(fā)”,將數(shù)據(jù)標準定義、指標規(guī)范定義、模型設計和數(shù)據(jù)開發(fā)體系連接在一起,讓數(shù)據(jù)治理流程自然融入到數(shù)據(jù)開發(fā)的全生命周期過程中,在數(shù)據(jù)開發(fā)過程中即可完成數(shù)據(jù)治理,實現(xiàn)研發(fā)治理一體化,從而幫助用戶在數(shù)據(jù)治理方面取得長效治理。
例如,數(shù)據(jù)標準定義了數(shù)據(jù)取值范圍、安全特性和類型,將數(shù)據(jù)標準與數(shù)據(jù)質量相結合,自動生成集合規(guī)則,則可以在數(shù)據(jù)測試階段看到數(shù)據(jù)質量報告,在線上運行階段可以收到數(shù)據(jù)治理告警;數(shù)據(jù)標準與安全中心結合,則可以得到加密、脫敏的規(guī)則,構建數(shù)據(jù)安全等級,實現(xiàn)數(shù)據(jù)開發(fā)治理一體化。
元數(shù)據(jù)管理也是治理能力中關鍵的一環(huán),網(wǎng)易數(shù)帆在技術元數(shù)據(jù)之外對管理元數(shù)據(jù)、業(yè)務元數(shù)據(jù)的覆蓋,使得產出的數(shù)據(jù)資產具備了可理解性。此外,網(wǎng)易數(shù)帆還通過大數(shù)據(jù)健康評估體系實現(xiàn)大數(shù)據(jù)的健康診斷,并且利用數(shù)據(jù)治理運營三板斧形成數(shù)據(jù)治理運營的改進閉環(huán);而且還能實現(xiàn)湖內、湖外數(shù)據(jù)統(tǒng)一治理,以及統(tǒng)一的數(shù)據(jù)資產門戶,從而幫助用戶不斷提升數(shù)據(jù)治理的效果。
“數(shù)據(jù)治理過去的理論和方法在當下的確存在巨大短板。網(wǎng)易數(shù)帆對數(shù)據(jù)治理理念進行大膽創(chuàng)新與實踐,如今在多個行業(yè)客戶中得到落地。未來,網(wǎng)易數(shù)帆還將打磨全鏈路大數(shù)據(jù)產品和技術能力,持續(xù)做好數(shù)據(jù)治理。”余利華補充道。
數(shù)據(jù)生產力模型:理論+實踐的最優(yōu)解
如果說數(shù)據(jù)治理是釋放數(shù)據(jù)生產力的基礎,那么要想徹底釋放數(shù)據(jù)生產力,則必須從數(shù)據(jù)全生命周期的整體視角帶來最優(yōu)解。為此,網(wǎng)易數(shù)帆基于過去各種理論和自身長期實踐,推出了數(shù)據(jù)生產力模型。
據(jù)悉,網(wǎng)易數(shù)帆數(shù)據(jù)生產力模型包含DataOps、DataFusion、DataProduct三大內核和數(shù)據(jù)技術、數(shù)據(jù)資產、數(shù)據(jù)應用、數(shù)據(jù)運營四要素。
具體來講, DataOps是一種將軟件工程CI/CD的方法融入數(shù)據(jù)開發(fā)的流程,基于自動化的數(shù)據(jù)測試、任務發(fā)布等技術,構建數(shù)據(jù)發(fā)布流水線,使得數(shù)據(jù)開發(fā)效率更高、交付更加頻繁,交付質量更有保障;DataFusion則是面向分析的數(shù)據(jù)治理,在傳統(tǒng)數(shù)據(jù)治理的基礎上,將數(shù)據(jù)治理融入到數(shù)據(jù)開發(fā)之中,形成開發(fā)與治理一體化;DataProduct則是通過數(shù)據(jù)產品化來打通數(shù)據(jù)到決策的轉化鏈路,實現(xiàn)數(shù)據(jù)到決策轉化。
而從企業(yè)實踐的角度,打造數(shù)據(jù)生產力離不開數(shù)據(jù)技術、數(shù)據(jù)資產、數(shù)據(jù)應用、數(shù)據(jù)運營四要素的共同作用,四要素提供了三大內核落地的路線圖。網(wǎng)易數(shù)帆認為,沉淀數(shù)據(jù)資產是核心所在,不僅符合企業(yè)追求數(shù)據(jù)價值的初衷,更容易獲得各層級各角色的感知與認同,也讓實現(xiàn)數(shù)據(jù)開發(fā)與治理一體化的意義更加鮮明。
數(shù)據(jù)生產力模型最難能可貴之處在于,它既充分汲取了互聯(lián)網(wǎng)公司在數(shù)據(jù)技術、數(shù)據(jù)理念和數(shù)據(jù)創(chuàng)新方面的可取之處,又從服務眾多傳統(tǒng)行業(yè)的過程中獲取了豐富的實踐經驗,以此來幫助企業(yè)建立數(shù)據(jù)資產管理體系和實現(xiàn)數(shù)據(jù)資產化。
正如余利華所言:“數(shù)據(jù)生產力模型是網(wǎng)易數(shù)帆融會貫通+創(chuàng)新的結果。”目前,數(shù)據(jù)生產力模型已經在金融、制造、醫(yī)藥、物流等多個行業(yè)得到實踐。
以東北證券為例,該公司選擇與網(wǎng)易數(shù)帆合作從0到1搭建數(shù)據(jù)治理體系,希望實現(xiàn)數(shù)據(jù)的資產化、價值化和智能化,支撐數(shù)字化轉型。結合組織架構、業(yè)務流程的梳理及網(wǎng)易數(shù)帆全平臺產品引入,通過元數(shù)據(jù)管理、數(shù)據(jù)標準、數(shù)據(jù)安全等能力,東北證券完成了數(shù)據(jù)資產的構建。目前,東北證券已完成核心系統(tǒng)30000余張表的全量元數(shù)據(jù)采集,數(shù)據(jù)資產的質量提升和完善累計注冊2814項,形成179個基礎數(shù)據(jù)標準,累計沉淀400余項數(shù)據(jù)質量規(guī)則,并建立了覆蓋數(shù)據(jù)分級分類的數(shù)據(jù)安全體系。
資產建立之后,相比此前BI需要到底層數(shù)據(jù)庫獲取數(shù)據(jù)的方式,此時通過數(shù)據(jù)資產拖動BI,效率、準確性和口徑一致性都更加有保障。
面向未來,企業(yè)在數(shù)字化轉型過程中所形成的變革能力、敏捷能力、生態(tài)能力、數(shù)字化產品與服務能力均是以數(shù)據(jù)為基礎,企業(yè)建立數(shù)據(jù)資產管理體系和實現(xiàn)數(shù)據(jù)資產化是大勢所趨。“網(wǎng)易數(shù)帆的生產力模型希望幫助企業(yè)充分激活數(shù)據(jù)生產要素活力,將數(shù)據(jù)與業(yè)務相結合,沉淀企業(yè)數(shù)據(jù)資產,從而實現(xiàn)數(shù)字化轉型發(fā)展。”余利華最后表示道。