DataOps是包括人、流程和技術(shù)的一整套體系,包括用來管理的代碼工具、技術(shù)架構(gòu)和數(shù)據(jù)本身,主要用于解決在運(yùn)維、開發(fā)、數(shù)據(jù)處理和分析這四個(gè)團(tuán)隊(duì)之間的協(xié)同,提升數(shù)據(jù)處理的效率。
Dataops 的核心和靈魂也是在于編排和調(diào)度。整個(gè)數(shù)據(jù)在管道里面的流動(dòng),數(shù)據(jù)的移動(dòng)、處理或完善,有著眾多依賴關(guān)系,一個(gè)優(yōu)秀的數(shù)據(jù)編排工具可以調(diào)動(dòng)數(shù)據(jù)開發(fā)項(xiàng)目中的所有四個(gè)部分,包括代碼、數(shù)據(jù)、技術(shù)工具和技術(shù)架構(gòu)。

在金融行業(yè)中,DataOps實(shí)現(xiàn)統(tǒng)一的數(shù)據(jù)開發(fā)平臺(tái),統(tǒng)一的分布式數(shù)據(jù)模型,統(tǒng)一的數(shù)據(jù)資產(chǎn),同時(shí)提供包括離線數(shù)據(jù)處理,實(shí)時(shí)流數(shù)據(jù)處理的任務(wù),并且高效地管理這些數(shù)據(jù)任務(wù),去降低用戶數(shù)據(jù)加工處理的復(fù)雜度及成本,為各種應(yīng)用場(chǎng)景提供更好的數(shù)據(jù)服務(wù)。