?搜索公眾號“慧日云企”快速關(guān)注

今天的大數(shù)據(jù)發(fā)展到何種狀態(tài)？ 我們需要做些什么，才能讓大數(shù)據(jù)應(yīng)用變得更加成熟？

從各種應(yīng)用分析和調(diào)查來看，雖然企業(yè)的數(shù)據(jù)量呈爆發(fā)趨勢增長，也更重視信息的來源和使用價值，但在實際的商業(yè)價值推動上，并沒有帶來顯著成果。 雖然大數(shù)據(jù)概念炒得很火熱，但應(yīng)用上仍停留在如何將正確的信息在正確的時間發(fā)送給正確的人。

為了收集、獲取海量數(shù)據(jù)，各種數(shù)據(jù)存儲和管理系統(tǒng)如雨后春筍般誕生，包括數(shù)據(jù)倉庫、數(shù)據(jù)湖和數(shù)據(jù)管理架構(gòu)等，開始加快走向企業(yè)應(yīng)用場景中。

只是，當企業(yè)的解決方案以及平臺架構(gòu)開始增多，業(yè)務(wù)的復(fù)雜性也隨之增加，企業(yè)需要一個標準的數(shù)據(jù)管理架構(gòu)，去整合所有的數(shù)據(jù)以及多樣的應(yīng)用工具，包括能實現(xiàn)跨環(huán)境以及混合應(yīng)用的管理。 以往集中式架構(gòu)，已經(jīng)不能滿足企業(yè)的業(yè)務(wù)需求了。 或者說，企業(yè)需要更強大的數(shù)據(jù)分析能力，能對不同的數(shù)據(jù)源進行訪問。 這也是以 Data Fabric 為核心的數(shù)據(jù)管理架構(gòu)，變得越來越流行的最根本原因。

理論上講，企業(yè)需要一個核心數(shù)據(jù)庫，能確保所有的數(shù)據(jù)都是最新、易管理，并且是干凈數(shù)據(jù)； 但之前的數(shù)據(jù)架構(gòu)模式不可能實現(xiàn)，而 Data Fabric 則能幫助企業(yè)實現(xiàn)不同數(shù)據(jù)的管理，并且能把各種數(shù)據(jù)之間的關(guān)系關(guān)聯(lián)起來，而不是將所有的數(shù)據(jù)傾倒在一個數(shù)據(jù)湖中。

所以，在數(shù)據(jù)的整個治理過程中，所有相關(guān)的應(yīng)用都很重要。 比如： 我們可以通過數(shù)據(jù)倉庫實現(xiàn)高性能、可重復(fù)的分析； 而數(shù)據(jù)湖可以存儲用于開發(fā)和測試的數(shù)據(jù)； Data Mesh 這種基于領(lǐng)域驅(qū)動和自服務(wù)的數(shù)據(jù)架構(gòu)設(shè)計模式，可以用來管理分布式數(shù)據(jù)，因為該服務(wù)本身借鑒了微服務(wù)和 Service Mesh 分布式架構(gòu)思想。 提到 Data Mesh，有人可能要問 Data Mesh 和 Data Fabric 是什么關(guān)系？ 其實，Data Mesh 和 Data Fabric 在概念上都差不多，都是一種新型的數(shù)據(jù)管理架構(gòu)，都致力于讓數(shù)據(jù)互聯(lián)互通。

當企業(yè)業(yè)務(wù)上升到一定量，構(gòu)建大數(shù)據(jù)平臺成為必須品。 問題是，大數(shù)據(jù)平臺如何構(gòu)建？ 不同企業(yè)有不同選擇！

有專家建議，最好采用兩種策略構(gòu)建 企業(yè)大數(shù)據(jù)平臺 ， 即一個用于生產(chǎn)，另一個用于分析。 但筆者認為，基于一個標準的數(shù)據(jù)架構(gòu)構(gòu)建大數(shù)據(jù)平臺，更有利于數(shù)據(jù)管理。 如果每個業(yè)務(wù)部門都建自己的平臺，需要支持多個數(shù)據(jù)庫，還得需要一個 ETL 平臺完成數(shù)據(jù)之間的轉(zhuǎn)換。 這時，數(shù)據(jù)的真實性、實時性都會出現(xiàn)挑戰(zhàn)。 構(gòu)建大數(shù)據(jù)平臺，最終的目標是為了整合數(shù)據(jù)，讓所有的數(shù)據(jù)實現(xiàn)可視化管理，并且無論數(shù)據(jù)在企業(yè)內(nèi)部還是云端，都能實現(xiàn)統(tǒng)一管理。 多一個數(shù)據(jù)平臺，就意味著企業(yè)在進行數(shù)據(jù)整合時，會增加額外的成本，并且容易出現(xiàn)數(shù)據(jù)安全隱患。

?慧日云企 是一家以企業(yè)云應(yīng)用、華為云、大數(shù)據(jù)技術(shù)、IDC基礎(chǔ)設(shè)施為核心的高科技企業(yè)。 涵蓋了醫(yī)療，教育等多個行業(yè)。 可以提供較為全面有多種定制化的解決方案。

如果企業(yè)選型選對，基于標準的數(shù)據(jù)架構(gòu)來打造打造大數(shù)據(jù)平臺，那意味企業(yè)擁有了先天的一站式大數(shù)據(jù)平臺管理能力，后期可以通過各種工具和手段進行數(shù)據(jù)的標準化管理。