在數(shù)字化程度日益加深的今天,數(shù)據(jù)對(duì)企業(yè)增長(zhǎng)的作用越來(lái)越重要。隨著十九屆四中全會(huì)正式把數(shù)據(jù)列為國(guó)家新興基礎(chǔ)性戰(zhàn)略資源和生產(chǎn)要素,如何使用并發(fā)揮數(shù)據(jù)的價(jià)值,是當(dāng)下企業(yè)所面臨的主要問(wèn)題。

然而企業(yè)的數(shù)字化轉(zhuǎn)型并非一蹴而就,需要在組織、業(yè)務(wù)流程和技術(shù)等方面持續(xù)投入。調(diào)研發(fā)現(xiàn),企業(yè)的數(shù)字化轉(zhuǎn)型往往面臨著以下幾個(gè)問(wèn)題:

?業(yè)務(wù)數(shù)據(jù)孤立:各業(yè)務(wù)團(tuán)隊(duì)獨(dú)立,數(shù)據(jù)孤島現(xiàn)象普遍存在,數(shù)據(jù)難以互通;

?數(shù)據(jù)重復(fù)存儲(chǔ):數(shù)據(jù)不集中,系統(tǒng)之間重復(fù)存儲(chǔ),重復(fù)計(jì)算;

?數(shù)據(jù)質(zhì)量差:數(shù)據(jù)質(zhì)量參差不齊,延遲、口徑等問(wèn)題導(dǎo)致業(yè)務(wù)使用數(shù)據(jù)有風(fēng)險(xiǎn);

?資產(chǎn)管理難:各類數(shù)據(jù)和接口缺少統(tǒng)一管理,難以真正發(fā)揮數(shù)據(jù)價(jià)值;

?安全無(wú)保障:數(shù)據(jù)安全有風(fēng)險(xiǎn),安全事故頻繁出現(xiàn),且問(wèn)題根源難以追溯。

由于業(yè)務(wù)規(guī)模快速增長(zhǎng),再加上場(chǎng)景多、結(jié)構(gòu)復(fù)雜,字節(jié)跳動(dòng)在發(fā)展過(guò)程中也面臨過(guò)相似的挑戰(zhàn):

?規(guī)模大:字節(jié)跳動(dòng)業(yè)務(wù)場(chǎng)景極其豐富,數(shù)據(jù)量巨大;

?重依賴:產(chǎn)品閉環(huán),線上服務(wù)及業(yè)務(wù)創(chuàng)新,都對(duì)數(shù)據(jù)有較強(qiáng)的依賴;

?影響大:核心業(yè)務(wù)數(shù)據(jù)延遲,質(zhì)量問(wèn)題將直接影響業(yè)務(wù)表現(xiàn)及發(fā)展。

從2016年開(kāi)始,字節(jié)跳動(dòng)開(kāi)始孵化大數(shù)據(jù)研發(fā)治理套件,結(jié)合自身業(yè)務(wù)特性,從數(shù)據(jù)提取、加工、管理等方面作為突破口,逐漸形成了數(shù)據(jù)集成、數(shù)據(jù)開(kāi)發(fā)、數(shù)據(jù)治理和數(shù)據(jù)資產(chǎn)四大產(chǎn)品體系,并且形成了一套自己獨(dú)有的方法論,幫助產(chǎn)品解決在數(shù)據(jù)增長(zhǎng)過(guò)程中遇到的困難和瓶頸。

經(jīng)過(guò)內(nèi)部不斷的打磨、驗(yàn)證,字節(jié)跳動(dòng)旗下數(shù)字服務(wù)與智能科技品牌火山引擎正式對(duì)外發(fā)布大數(shù)據(jù)研發(fā)治理套件,為企業(yè)數(shù)字化轉(zhuǎn)型添磚加瓦。

火山引擎大數(shù)據(jù)研發(fā)治理套件產(chǎn)品架構(gòu)圖

在產(chǎn)品能力上,火山引擎大數(shù)據(jù)研發(fā)治理套件擁有以下幾點(diǎn)優(yōu)勢(shì):

1.整合全域數(shù)據(jù),支持20余種異構(gòu)數(shù)據(jù)源的豐富傳輸方式,靈活對(duì)接各類業(yè)務(wù)系統(tǒng),實(shí)現(xiàn)數(shù)據(jù)在復(fù)雜網(wǎng)絡(luò)下穩(wěn)定、高效的互聯(lián)互通和信息共享;

2.沉淀數(shù)據(jù)規(guī)范,統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)及數(shù)據(jù)查詢出口,沉淀數(shù)倉(cāng)建設(shè)規(guī)范的最佳實(shí)踐,降低使用門檻,提高全鏈路研發(fā)體驗(yàn),快速精準(zhǔn)為業(yè)務(wù)賦能;

3.全鏈路綜合治理,結(jié)合基線監(jiān)控、數(shù)據(jù)質(zhì)量、SLA治理、成本管理等能力,提供事前預(yù)警、事中處理、事后推薦優(yōu)化的全生命周期的數(shù)據(jù)治理能力;

4.提升數(shù)據(jù)可靠性,權(quán)限最小化原則保障數(shù)據(jù)安全,構(gòu)建真正意義上的數(shù)據(jù)安全屏障。字段級(jí)別的血緣管理,幫助企業(yè)用戶提供從數(shù)據(jù)發(fā)現(xiàn)到數(shù)據(jù)理解到數(shù)據(jù)到資產(chǎn)管理的一站式大數(shù)據(jù)服務(wù)。

相較于其他企業(yè),字節(jié)跳動(dòng)成立時(shí)間短,業(yè)務(wù)發(fā)展快,組織架構(gòu)自下而上進(jìn)行,這對(duì)數(shù)據(jù)治理工作有著非常大的挑戰(zhàn)。在中臺(tái)領(lǐng)域中,數(shù)據(jù)治理又是一個(gè)工序復(fù)雜,周期長(zhǎng)、見(jiàn)效慢的過(guò)程,單靠工具無(wú)法徹底解決數(shù)據(jù)治理遇到的問(wèn)題,需要企業(yè)領(lǐng)導(dǎo)層推動(dòng):根據(jù)業(yè)務(wù)情況,結(jié)合產(chǎn)品能力進(jìn)行落地,并加以監(jiān)管。

“在此情況下,字節(jié)跳動(dòng)根據(jù)自身特點(diǎn),從人員配置、團(tuán)隊(duì)結(jié)構(gòu)、數(shù)據(jù)管理等方面入手,遵從去中心化原則,徹底貫徹中臺(tái)化建設(shè),以小管大,創(chuàng)立分布式管理和分布式自治,以人為單位,為數(shù)據(jù)結(jié)果負(fù)責(zé),將數(shù)據(jù)真正利用起來(lái)?！被鹕揭嫦嚓P(guān)負(fù)責(zé)人表示,火山引擎的大數(shù)據(jù)研發(fā)治理套件也很好地繼承了“為數(shù)據(jù)結(jié)果負(fù)責(zé)的”特性,打造了一個(gè)完整的數(shù)據(jù)治理閉環(huán)鏈路,真正發(fā)揮企業(yè)的數(shù)據(jù)價(jià)值。

對(duì)于未來(lái),火山引擎還將結(jié)合自身實(shí)踐及市場(chǎng)情況,在數(shù)據(jù)治理、資產(chǎn)等方面,不斷補(bǔ)充、完善自身產(chǎn)品建設(shè)及經(jīng)驗(yàn),為企業(yè)提供更貼切的服務(wù),助力企業(yè)實(shí)現(xiàn)業(yè)務(wù)的快速增長(zhǎng)。