2023年大數(shù)據(jù)行業(yè)預(yù)測(cè)
到2023年,大數(shù)據(jù)技術(shù)和產(chǎn)品日益成熟,從而提高企業(yè)數(shù)據(jù)的質(zhì)量和信任度。這將導(dǎo)致企業(yè)內(nèi)部出現(xiàn)更健壯的數(shù)據(jù)組織,從而增加對(duì)數(shù)據(jù)建模技術(shù)和數(shù)據(jù)團(tuán)隊(duì)/工程師的需求。
Coalesce公司聯(lián)合創(chuàng)始人兼首席執(zhí)行官Armon Petrossian指出,隨著企業(yè)推動(dòng)變革,數(shù)據(jù)市場(chǎng)將不斷發(fā)展。隨著DBT、Snowflake、Databricks等技術(shù)的興起,過(guò)去十年一直是云計(jì)算和現(xiàn)代數(shù)據(jù)棧的時(shí)代。雖然這種趨勢(shì)對(duì)中小型企業(yè)影響極大,因?yàn)樗鼈兛梢栽趲追昼妰?nèi)啟動(dòng)數(shù)據(jù)平臺(tái),但大型企業(yè)面臨著不同的挑戰(zhàn),主要圍繞現(xiàn)代化、變更管理和治理。這就是數(shù)據(jù)沿襲開(kāi)始發(fā)揮關(guān)鍵作用的地方。如今的數(shù)據(jù)市場(chǎng)極其分散,其中一個(gè)大問(wèn)題是,尤其是考慮到經(jīng)濟(jì)衰退以及數(shù)據(jù)是否會(huì)整合,以及如何整合。2023年,人們可能會(huì)看到更多的并購(gòu)。此外,希望在非技術(shù)方面有更多的發(fā)展,包括數(shù)據(jù)契約、數(shù)據(jù)網(wǎng)格或高級(jí)聯(lián)邦治理流程,因?yàn)閷?duì)于任何成熟的數(shù)據(jù)組織來(lái)說(shuō),這似乎是數(shù)據(jù)之旅的下一個(gè)明顯步驟。
Ocient公司首席執(zhí)行官兼聯(lián)合創(chuàng)始人Chris Gladwin指出,數(shù)據(jù)復(fù)雜性將增加:數(shù)據(jù)的性質(zhì)正在發(fā)生變化。隨著結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)之間的界限越來(lái)越模糊,數(shù)據(jù)類(lèi)型越來(lái)越多,數(shù)據(jù)類(lèi)型也越來(lái)越復(fù)雜。與此同時(shí),用于管理和分析數(shù)據(jù)的軟件和平臺(tái)也在不斷發(fā)展。一類(lèi)新的專用數(shù)據(jù)庫(kù)專門(mén)處理不同的數(shù)據(jù)類(lèi)型——圖形、向量、空間、文檔、列表、視頻等等。下一代云數(shù)據(jù)倉(cāng)庫(kù)必須具有多功能性,能夠原生支持多模式數(shù)據(jù),以確保其處理的工作負(fù)載的性能和靈活性。例如,OcientHyperscaleDataWarehouse支持?jǐn)?shù)組、元組、矩陣、行、多邊形、地理空間數(shù)據(jù)、IP地址和大型變長(zhǎng)字符字段。在數(shù)字化轉(zhuǎn)型和全球業(yè)務(wù)需求的推動(dòng)下,分析新的、更復(fù)雜的數(shù)據(jù)類(lèi)型(包括半結(jié)構(gòu)化數(shù)據(jù))的需求將在未來(lái)幾年得到加強(qiáng)。例如,電信網(wǎng)絡(luò)運(yùn)營(yíng)商可能希望分析網(wǎng)絡(luò)元數(shù)據(jù),以了解其交換機(jī)和路由器的健康狀況?;蛘哌h(yuǎn)洋運(yùn)輸公司可能想要運(yùn)行地理空間分析來(lái)進(jìn)行物流和路線優(yōu)化。
Snowplow公司首席數(shù)據(jù)官(CDO)Chris Lubasch說(shuō),2023年將是圍繞現(xiàn)代數(shù)據(jù)棧進(jìn)行快速討論的一年。許多新的供應(yīng)商將會(huì)出現(xiàn),像Snowflake和Databricks這樣的主要供應(yīng)商繼續(xù)他們的旅程,接管了許多技術(shù)組件,盡管經(jīng)濟(jì)形勢(shì)充滿挑戰(zhàn)。但與此同時(shí),也出現(xiàn)了質(zhì)疑現(xiàn)代數(shù)據(jù)堆棧的聲音,這些數(shù)據(jù)堆棧的解耦方法往往會(huì)導(dǎo)致許多工具和高成本,更不用說(shuō)將它們組合在一起的復(fù)雜性了。圍繞“后現(xiàn)代數(shù)據(jù)棧”的討論已經(jīng)開(kāi)始,人們都渴望看到這將在未來(lái)幾年引向何方。
Fivetran公司產(chǎn)品總監(jiān)Alexander Lovell表示,2023年將是數(shù)據(jù)團(tuán)隊(duì)開(kāi)工或停工的時(shí)間。盡管回報(bào)質(zhì)量存在很大差異,但企業(yè)仍保持了對(duì)IT的投資。在經(jīng)濟(jì)領(lǐng)域普遍存在困惑的情況下,是時(shí)候讓數(shù)據(jù)團(tuán)隊(duì)通過(guò)提供可操作的見(jiàn)解而大放異彩了,因?yàn)楫?dāng)市場(chǎng)處于波動(dòng)之中時(shí),高管的直覺(jué)不那么可靠。最好的數(shù)據(jù)團(tuán)隊(duì)將會(huì)成長(zhǎng)并變得更加重要。不能產(chǎn)生可操作見(jiàn)解的數(shù)據(jù)團(tuán)隊(duì)將面臨更大的預(yù)算壓力。
MANTA公司研究與教育副總裁Jan Ulrych說(shuō),元數(shù)據(jù)將由數(shù)據(jù)譜系驅(qū)動(dòng)。元數(shù)據(jù)是當(dāng)今最引人注目的數(shù)據(jù)策略趨勢(shì)。然而,這不僅僅是收集元數(shù)據(jù),而是通過(guò)激活來(lái)釋放它的力量。數(shù)據(jù)沿襲是元數(shù)據(jù)的基本類(lèi)型,能夠提供最強(qiáng)大的好處。如果操作得當(dāng),它可以實(shí)現(xiàn)自動(dòng)化和智能的數(shù)據(jù)管理實(shí)踐。
元數(shù)據(jù)是當(dāng)今最引人注目的數(shù)據(jù)策略趨勢(shì)。然而,這不僅僅是收集元數(shù)據(jù),而是通過(guò)激活來(lái)釋放它的力量。數(shù)據(jù)沿襲是元數(shù)據(jù)的基本類(lèi)型,能夠提供最強(qiáng)大的好處。如果操作得當(dāng),它可以實(shí)現(xiàn)自動(dòng)化和智能的數(shù)據(jù)管理實(shí)踐。
Snowplow公司聯(lián)合創(chuàng)始人Yali Sassoon表示,在2023年,“數(shù)據(jù)產(chǎn)品經(jīng)理”和“數(shù)據(jù)產(chǎn)品管理”將會(huì)興起,作為將數(shù)據(jù)視為產(chǎn)品、設(shè)計(jì)和實(shí)施正確的數(shù)據(jù)合同(作為數(shù)據(jù)產(chǎn)品的一部分)以及使組織構(gòu)建“數(shù)據(jù)網(wǎng)格”所需的關(guān)鍵人物/關(guān)鍵技能集。此外,預(yù)計(jì)更多的組織將在云數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)湖上構(gòu)建可操作(包括實(shí)時(shí))用例,并由核心供應(yīng)商(如Databricks和Snowflake)和生態(tài)系統(tǒng)中的公司提供更好的工具支持。最后,預(yù)測(cè)將會(huì)有更周到的方法/技術(shù)架構(gòu)來(lái)管理個(gè)人身份數(shù)據(jù)的數(shù)據(jù)民主化和數(shù)據(jù)遵從性之間的緊張關(guān)系。增加對(duì)測(cè)量數(shù)據(jù)投資的投資回報(bào)率的關(guān)注。
vFunction公司首席生態(tài)系統(tǒng)官Bob Quillin表示,迭代取代大爆炸:對(duì)于高度復(fù)雜的大規(guī)?,F(xiàn)代化項(xiàng)目,業(yè)務(wù)領(lǐng)導(dǎo)者可能會(huì)尋找“簡(jiǎn)單的按鈕”,但首席技術(shù)官和軟件架構(gòu)師知道現(xiàn)實(shí)情況大不相同。從一個(gè)整體中開(kāi)發(fā)出微服務(wù)是一個(gè)迭代過(guò)程,通常需要重構(gòu)和平臺(tái)化。除非您的應(yīng)用程序相當(dāng)簡(jiǎn)單,否則“一次一個(gè)”的方法是確保成功和管理風(fēng)險(xiǎn)的推薦方法,并實(shí)際上提高項(xiàng)目速度。嘗試一次性做太多事情,或者嘗試“大爆炸”的現(xiàn)代化或重寫(xiě)是大多數(shù)應(yīng)用現(xiàn)代化項(xiàng)目失敗、失敗或失敗的原因。這并不一定像看起來(lái)那樣緩慢而穩(wěn)定,因?yàn)榈鷺?gòu)建的速度將在短時(shí)間內(nèi)超過(guò)任何大規(guī)模的任務(wù)。
Cherre公司客戶解決方案高級(jí)副總裁Raj Bhatti表示,在過(guò)去的幾年里,大數(shù)據(jù)被認(rèn)為是一種將顛覆多個(gè)行業(yè)的技術(shù)。然而,由于元數(shù)據(jù)驅(qū)動(dòng)的數(shù)據(jù)結(jié)構(gòu)、AutoML和不斷增長(zhǎng)的數(shù)據(jù)種類(lèi)的進(jìn)步,大數(shù)據(jù)的采用已經(jīng)激增。
數(shù)據(jù)技術(shù)社區(qū)在2022年開(kāi)始討論元數(shù)據(jù)驅(qū)動(dòng)的數(shù)據(jù)結(jié)構(gòu)。由于數(shù)據(jù)結(jié)構(gòu)中的主動(dòng)元數(shù)據(jù)輔助自動(dòng)化功能減少了人力資源的使用,同時(shí)提高了數(shù)據(jù)利用率,因此該技術(shù)將在2023年獲得巨大的吸引力。數(shù)據(jù)結(jié)構(gòu)監(jiān)聽(tīng)、學(xué)習(xí)并對(duì)元數(shù)據(jù)或“場(chǎng)景中的數(shù)據(jù)”采取行動(dòng),這有助于用戶訪問(wèn)場(chǎng)景信息。關(guān)鍵的戰(zhàn)略區(qū)別之一將是能夠訪問(wèn)場(chǎng)景數(shù)據(jù)。
由于AutoML的出現(xiàn),機(jī)器學(xué)習(xí)(ML)將在明年變得更容易為非專家所接受。這是一類(lèi)機(jī)器學(xué)習(xí)算法,有助于自動(dòng)化機(jī)器學(xué)習(xí)模型的設(shè)計(jì)和訓(xùn)練。機(jī)器學(xué)習(xí)模型是由人類(lèi)構(gòu)建的算法創(chuàng)建的。
許多企業(yè)現(xiàn)在要么有內(nèi)部人才,要么有合作伙伴,他們已經(jīng)交付了成功的大數(shù)據(jù)驅(qū)動(dòng)解決方案。這些有據(jù)可稽的成功故事,加上更有效的分析技術(shù),使得商業(yè)成果越來(lái)越成為大數(shù)據(jù)項(xiàng)目中必不可少的過(guò)濾器。因此,在2023年,預(yù)計(jì)很少會(huì)遇到使用研發(fā)預(yù)算的大數(shù)據(jù)項(xiàng)目。
大數(shù)據(jù)在2023年將變得觸手可及的一年。大多數(shù)公司現(xiàn)在都明白數(shù)據(jù)作為一種資產(chǎn)的價(jià)值,但許多企業(yè)仍在努力挖掘它的真正價(jià)值。嘗試這樣做在一定程度上推動(dòng)了托管數(shù)據(jù)庫(kù)即服務(wù)和/或數(shù)據(jù)管理即服務(wù)的增長(zhǎng),從而降低了復(fù)雜性。2023年,人們將看到這一過(guò)程的下一步,企業(yè)高管將開(kāi)始采用數(shù)據(jù)可視化平臺(tái)和工具,以更好地理解大數(shù)據(jù),并利用它做出更明智的決策。
- 上一篇
實(shí)時(shí)分析能否解決供應(yīng)鏈危機(jī)?
首先,我們來(lái)談?wù)勚悄芗夹g(shù)如何幫助更好地了解交通服務(wù)。如今,人們經(jīng)常聽(tīng)到物聯(lián)網(wǎng)(IoT)這個(gè)詞。就運(yùn)輸服務(wù)而言,物聯(lián)網(wǎng)意味著供應(yīng)鏈的每個(gè)組成部分都附有某種跟蹤器。
- 下一篇
數(shù)據(jù)湖如何為企業(yè)賦能
數(shù)據(jù)湖可以幫助組織執(zhí)行SQL查詢、大數(shù)據(jù)分析、全文搜索、實(shí)時(shí)分析和機(jī)器學(xué)習(xí)(ML)等分析來(lái)發(fā)現(xiàn)見(jiàn)解。調(diào)查結(jié)果顯示,一般企業(yè)的數(shù)據(jù)每年都會(huì)膨脹50%。除了數(shù)據(jù)量之外,這些企業(yè)還管理來(lái)自33個(gè)獨(dú)特來(lái)源的數(shù)據(jù)。除非他們實(shí)施數(shù)據(jù)湖技術(shù),否則他們會(huì)發(fā)現(xiàn)導(dǎo)航大量和多樣化的數(shù)據(jù)具有挑戰(zhàn)性。