根據(jù)2022 年數(shù)據(jù)質(zhì)量狀況報(bào)告，在所有接受調(diào)查的企業(yè)中，近 70% 的企業(yè)已經(jīng)開(kāi)始了數(shù)據(jù)質(zhì)量管理 (DQM) 之旅。不跟上 DQM 趨勢(shì)和技術(shù)步伐的組織將會(huì)落在后面，這一點(diǎn)很快變得很明顯。以下是您應(yīng)該了解的重要的趨勢(shì)。
  1. 建立數(shù)據(jù)素養(yǎng)的工作文化
  盡管數(shù)據(jù)被認(rèn)為是成功的關(guān)鍵因素，組織中的每個(gè)人都可以使用數(shù)據(jù)，但很少有人真正了解他們所使用的數(shù)據(jù)的價(jià)值。38% 的調(diào)查受訪者承認(rèn)，缺乏管理和分析數(shù)據(jù)的熟練資源阻礙了他們的發(fā)展。34% 的人不理解他們使用的數(shù)據(jù)。
  當(dāng)您不知道您面前的數(shù)據(jù)的潛力時(shí)，您就無(wú)法使用它。這使人們意識(shí)到企業(yè)需要優(yōu)先考慮建立強(qiáng)大的數(shù)據(jù)素養(yǎng)文化。高層管理人員和一線員工需要具備理解數(shù)據(jù)、分析數(shù)據(jù)并與之互動(dòng)的能力。
  2. 以云數(shù)據(jù)技術(shù)上線
  從將云視為打破孤島和集中存儲(chǔ)數(shù)據(jù)的一種方式，它現(xiàn)在已成為數(shù)字解決方案、服務(wù)和自動(dòng)化工具的首選之地。用于數(shù)據(jù)質(zhì)量相關(guān)任務(wù)的云服務(wù)提供商的數(shù)量正在穩(wěn)步增加。其中的一些關(guān)鍵原因是它們提供的可擴(kuò)展性、較低的前期成本和易用性。
  新的云數(shù)據(jù)解決方案專注于一系列服務(wù)，從自動(dòng)數(shù)據(jù)質(zhì)量檢查、自動(dòng)翻譯和安全到快速遷移、人工智能驅(qū)動(dòng)的數(shù)據(jù)操作和治理集成。隨著對(duì)結(jié)構(gòu)化數(shù)據(jù)倉(cāng)庫(kù)和管理的需求增長(zhǎng)，數(shù)據(jù)中心也變得越來(lái)越流行。
  3. 為高效的 DQM 部署 AI/ML 模型
  為了使 DQM 流程更加高效和可靠，數(shù)據(jù)團(tuán)隊(duì)正在從手動(dòng)流程轉(zhuǎn)向開(kāi)發(fā)和部署 AI/ML 模型。根據(jù)麥肯錫的一份報(bào)告，截至 2021 年，對(duì)人工智能的投資已突破 1650 億美元大關(guān)。
  這被用于解決常見(jiàn)的數(shù)據(jù)質(zhì)量問(wèn)題和自動(dòng)化數(shù)據(jù)分類、標(biāo)記、預(yù)測(cè)分析等任務(wù)。借助人工智能，數(shù)據(jù)質(zhì)量團(tuán)隊(duì)可以超越結(jié)構(gòu)數(shù)據(jù)管理需求和文本需求，實(shí)現(xiàn)與自然語(yǔ)言處理、計(jì)算機(jī)視覺(jué)、知識(shí)圖譜等相關(guān)功能的自動(dòng)化。
  4. 自動(dòng)化流程以提高效率
  整個(gè)數(shù)據(jù)管理行業(yè)的自動(dòng)化正在興起。這樣做的主要原因是它可以節(jié)省時(shí)間。元數(shù)據(jù)和人工智能自動(dòng)化的一些流程包括數(shù)據(jù)發(fā)現(xiàn)和入職、數(shù)據(jù)質(zhì)量監(jiān)控、黃金記錄創(chuàng)建和數(shù)據(jù)匹配。鑒于即使是好的數(shù)據(jù)也會(huì)隨著時(shí)間的推移而衰減，因此定期質(zhì)量檢查等流程的自動(dòng)化就顯得尤為重要。
  5. 更加注重信任和安全
  盡管組織已經(jīng)開(kāi)始致力于數(shù)據(jù)治理和信任，但它尚未充分發(fā)揮其潛力。隨著意識(shí)的增強(qiáng)，DQN 解決方案越來(lái)越關(guān)注微調(diào)治理機(jī)會(huì)和信任架構(gòu)。超過(guò)340 億美元已投資于數(shù)字身份和信任架構(gòu)領(lǐng)域。
  越來(lái)越多地使用智能數(shù)據(jù)倉(cāng)庫(kù)來(lái)自動(dòng)化和集成信任需求并驅(qū)動(dòng)數(shù)據(jù)加密。自動(dòng)執(zhí)行安全漏洞和治理數(shù)據(jù)檢查的工具被視為獲得競(jìng)爭(zhēng)優(yōu)勢(shì)的一種方式。
  6. 數(shù)據(jù)質(zhì)量作為合規(guī)工具
  政府在社會(huì)、治理和環(huán)境方面的法規(guī)越來(lái)越嚴(yán)格。因此，組織不得不花費(fèi)更多的時(shí)間和精力通過(guò)數(shù)據(jù)質(zhì)量檢查來(lái)履行合規(guī)性和合同義務(wù)。
  例如，宣傳自己為可持續(xù)品牌的品牌現(xiàn)在必須更加努力地證明自己配得上這個(gè)標(biāo)簽。許多人被指控洗綠或歪曲他們的報(bào)告。即使指控沒(méi)有根據(jù)，解決這個(gè)問(wèn)題的方法是堅(jiān)持要求供應(yīng)商提供高質(zhì)量的報(bào)告，并通過(guò)及時(shí)報(bào)告來(lái)滿足政府監(jiān)管的要求。
  7. 低代碼/無(wú)代碼數(shù)據(jù)應(yīng)用
  隨著組織致力于數(shù)據(jù)民主化并讓每個(gè)人都對(duì)數(shù)據(jù)質(zhì)量負(fù)責(zé)，對(duì)低代碼/無(wú)代碼數(shù)據(jù)應(yīng)用程序的需求不斷增加。這些是任何人都可以學(xué)習(xí)如何使用的工具，即使他們之前沒(méi)有任何編碼知識(shí)或廣泛的技術(shù)技能。無(wú)需更改基本代碼即可部署在任何硬件上的容器化應(yīng)用程序的使用也在增加。從 2021 年到 2027 年，使用容器化應(yīng)用程序的組織數(shù)量
  這個(gè)想法是讓人們能夠獨(dú)立地加載數(shù)據(jù)，采取措施提高數(shù)據(jù)質(zhì)量并自動(dòng)檢查以節(jié)省數(shù)據(jù)工程師的時(shí)間。然后，他們可以利用這段時(shí)間來(lái)確定 DQM 所需的其他任務(wù)的優(yōu)先級(jí)。