技術(shù)
導(dǎo)讀:在這篇文章中,我們討論了網(wǎng)格在不同設(shè)置中的實(shí)際應(yīng)用。
網(wǎng)格以分散的方式跨物理和虛擬網(wǎng)絡(luò)分布數(shù)據(jù)。與需要高度集中的基礎(chǔ)架構(gòu)的傳統(tǒng)數(shù)據(jù)集成工具不同,數(shù)據(jù)網(wǎng)格可以跨本地、多云和單云邊緣環(huán)境工作。
在這篇文章中,我們討論了網(wǎng)格在不同設(shè)置中的實(shí)際應(yīng)用。
數(shù)據(jù)網(wǎng)格:解決幾個(gè)常見(jiàn)問(wèn)題
根據(jù)麻省理工學(xué)院的調(diào)查結(jié)果,只有 13% 的受訪組織能夠按照他們的數(shù)據(jù)戰(zhàn)略成功交付。數(shù)據(jù)網(wǎng)格正在解決許多負(fù)責(zé)任的根本原因。
使用數(shù)據(jù)網(wǎng)格可以解決在較小規(guī)模的數(shù)據(jù)管道中出現(xiàn)的幾個(gè)問(wèn)題。如果不加以解決,隨著時(shí)間的推移,這些問(wèn)題很快就會(huì)變得有問(wèn)題和脆弱,因?yàn)殡s亂的點(diǎn)對(duì)點(diǎn)系統(tǒng)會(huì)隨著時(shí)間的推移創(chuàng)建自己的網(wǎng)絡(luò)。
同時(shí),數(shù)據(jù)網(wǎng)格還解決了組織中更大的問(wèn)題,例如公司不同部門(mén)可能存在分歧的核心業(yè)務(wù)事實(shí)。
通過(guò)實(shí)施數(shù)據(jù)網(wǎng)格,系統(tǒng)不太可能擁有事實(shí)副本。
使用數(shù)據(jù)網(wǎng)格不僅可以為系統(tǒng)帶來(lái)秩序,還可以為您提供更好的可管理性、成熟和演進(jìn)的數(shù)據(jù)架構(gòu)。
隨著我們看到基于云的應(yīng)用程序的興起,應(yīng)用程序架構(gòu)正在從傳統(tǒng)的集中式 IT 轉(zhuǎn)移并過(guò)渡到分布式服務(wù)網(wǎng)格或微服務(wù)。一個(gè)名為 K2view 的實(shí)時(shí)數(shù)據(jù)平臺(tái)領(lǐng)先一步,成功地在其結(jié)構(gòu)和網(wǎng)格架構(gòu)中實(shí)現(xiàn)了 micro-DB 的使用。每個(gè)微型數(shù)據(jù)庫(kù)僅存儲(chǔ)特定業(yè)務(wù)合作伙伴(客戶)的數(shù)據(jù),而其網(wǎng)格平臺(tái)存儲(chǔ)數(shù)百萬(wàn)個(gè)此類微型數(shù)據(jù)庫(kù)。
數(shù)據(jù)網(wǎng)格:用例
數(shù)據(jù)網(wǎng)格可以支持跨多個(gè)域的多個(gè)分析和操作用例。一些例子包括:-
1. 了解客戶生命周期
它為客戶關(guān)懷提供 360 度支持,并顯著減少平均客戶處理時(shí)間。它還可以提高客戶滿意度并提高首次聯(lián)系解決率。
營(yíng)銷部門(mén)還可以部署一個(gè)單一的客戶視圖,以進(jìn)行下一個(gè)最佳報(bào)價(jià)決策或預(yù)測(cè)客戶流失建模。
2. 物聯(lián)網(wǎng) (IoT) 中的實(shí)用程序
通過(guò)物聯(lián)網(wǎng)設(shè)備監(jiān)控,產(chǎn)品團(tuán)隊(duì)可以深入了解邊緣設(shè)備的使用模式。他們可以使用此模式信息來(lái)迭代和提高他們的盈利能力和產(chǎn)品采用率。
通過(guò)為物聯(lián)網(wǎng)設(shè)備采用網(wǎng)狀網(wǎng)絡(luò),公司可以獲得一些好處,使其在選擇網(wǎng)絡(luò)時(shí)成為一種流行的技術(shù)。
公司可以以非常低的成本將所有物聯(lián)網(wǎng)、企業(yè)、流媒體和第 3 方數(shù)據(jù)一起存儲(chǔ)到 S3 數(shù)據(jù)湖中。
3. 自愈算法
正如在最短路徑橋接之前提到的,即使在某些節(jié)點(diǎn)失去連接的情況下,自愈算法也會(huì)自動(dòng)選擇發(fā)送數(shù)據(jù)的最佳路徑。
該算法允許系統(tǒng)僅使用可用的和工作的連接。因此,即使某些設(shè)備停止運(yùn)行,網(wǎng)絡(luò)仍然能夠發(fā)送和接收維持或完成給定任務(wù)所需的信息。
4.分布式和更有效的安全性
現(xiàn)在,當(dāng)談到安全性時(shí),企業(yè)已經(jīng)做好了充分的準(zhǔn)備并不斷更新他們的協(xié)議。然而,中小企業(yè)缺乏必要的指導(dǎo)。根據(jù)埃森哲的網(wǎng)絡(luò)犯罪研究,43% 的攻擊針對(duì)的是較小的組織,而只有 14% 的攻擊能夠自我預(yù)防。
借助像 Mesh 這樣的現(xiàn)代數(shù)據(jù)管理解決方案,中小企業(yè)有機(jī)會(huì)跟上潮流。
在數(shù)據(jù)高度分散和分布式的情況下,安全性至關(guān)重要。
此類系統(tǒng)應(yīng)將授權(quán)和身份驗(yàn)證活動(dòng)委托給不同的用戶,根據(jù)需要為他們提供不同級(jí)別的訪問(wèn)權(quán)限。
2022 年市場(chǎng)首要報(bào)告中確定了以下數(shù)據(jù)網(wǎng)格的關(guān)鍵安全能力:
各種形式的數(shù)據(jù)隱私管理
數(shù)據(jù)加密,無(wú)論是靜止還是動(dòng)態(tài)
數(shù)據(jù)屏蔽,有效管理 PII 混淆
CCPA 和 GDPR 合規(guī)性以及其他法
規(guī)涵蓋所有 IAM/LDAP 類型服務(wù)的身份管理
5. 自配置
由于網(wǎng)狀網(wǎng)絡(luò)的自動(dòng)發(fā)現(xiàn),物聯(lián)網(wǎng)設(shè)備現(xiàn)在可以自我配置。它會(huì)自動(dòng)校準(zhǔn)新節(jié)點(diǎn)并將它們連接到所需的網(wǎng)絡(luò),而無(wú)需任何先前的設(shè)置。
借助此功能,可以輕松擴(kuò)展和管理網(wǎng)絡(luò)。
6. 營(yíng)銷和銷售
營(yíng)銷和銷售團(tuán)隊(duì)可以通過(guò)使用分布式數(shù)據(jù)輕松地從不同平臺(tái)和系統(tǒng)中策劃 360 度全方位消費(fèi)者檔案和行為視圖。
這使他們能夠創(chuàng)建更有針對(duì)性的活動(dòng)、CLV(客戶生命周期價(jià)值)、更好的潛在客戶評(píng)分準(zhǔn)確性,并執(zhí)行其他幾個(gè)重要的績(jī)效指標(biāo)。
營(yíng)銷團(tuán)隊(duì)使用超細(xì)分在正確的時(shí)間通過(guò)正確的渠道向正確的客戶提供營(yíng)銷活動(dòng)。
7.人工智能和機(jī)器學(xué)習(xí)
智能和開(kāi)發(fā)團(tuán)隊(duì)可以輕松地從多個(gè)來(lái)源創(chuàng)建數(shù)據(jù)目錄和虛擬倉(cāng)庫(kù),以提供 AI 和機(jī)器學(xué)習(xí)模型。
這為他們提供了更多洞察力,而無(wú)需在給定的中心位置收集所有數(shù)據(jù)。
團(tuán)隊(duì)還可以使用聯(lián)合數(shù)據(jù)準(zhǔn)備,使域能夠?yàn)閿?shù)據(jù)分析工作負(fù)載提供可信數(shù)據(jù)和質(zhì)量。
8. 防損
通過(guò)在金融部門(mén)實(shí)施數(shù)據(jù)網(wǎng)格,公司可以更快地獲得洞察力,同時(shí)降低運(yùn)營(yíng)風(fēng)險(xiǎn)和成本。
此功能使國(guó)際金融機(jī)構(gòu)和組織能夠在本地分析其數(shù)據(jù)。這可以在任何地區(qū)或國(guó)家完成,它有助于識(shí)別任何欺詐威脅,而無(wú)需創(chuàng)建任何可以傳輸?shù)街醒霐?shù)據(jù)庫(kù)的數(shù)據(jù)集副本。
數(shù)據(jù)隱私管理允許公司保護(hù)他們的客戶數(shù)據(jù),因?yàn)樗麄儽仨氉袷夭粩喟l(fā)展的區(qū)域數(shù)據(jù)和隱私法,如 VCDPA。
數(shù)據(jù)網(wǎng)格的幾個(gè)實(shí)際實(shí)現(xiàn)
金融服務(wù)機(jī)構(gòu)
在他們的一篇博客中,Thoughtworks 討論了數(shù)據(jù)網(wǎng)格對(duì)金融機(jī)構(gòu)數(shù)據(jù)流程的影響。
由于此類應(yīng)用程序?qū)崟r(shí)處理大量事務(wù)數(shù)據(jù),因此將準(zhǔn)確及時(shí)的數(shù)據(jù)流傳輸?shù)椒治鱿到y(tǒng)非常重要。
在這種情況下,高管可以靈活地快速操作數(shù)據(jù),并且能夠訪問(wèn)面向領(lǐng)域的數(shù)據(jù)產(chǎn)品。
這使他們能夠提出更多相關(guān)問(wèn)題,并最終獲得更可靠的答案和有價(jià)值的見(jiàn)解,以便在更短的時(shí)間內(nèi)采取行動(dòng)。
不僅如此,領(lǐng)域團(tuán)隊(duì)還能夠使用分析數(shù)據(jù)并將其直接構(gòu)建到用戶的數(shù)字體驗(yàn)中。
AWS S3
大約 15 年前,當(dāng) AWS 將其存儲(chǔ)層商品化并用 AWS S3 對(duì)象存儲(chǔ)取而代之時(shí),發(fā)生了巨大的變化。
由于 S3 和其他云存儲(chǔ)的可負(fù)擔(dān)性和普遍性,公司現(xiàn)在正在將其數(shù)據(jù)轉(zhuǎn)移到云對(duì)象存儲(chǔ)。這使他們能夠構(gòu)建數(shù)據(jù)湖,最終可以以不同的方式分析數(shù)據(jù)。
時(shí)尚零售商品牌
歐洲最大的在線時(shí)尚零售商 Zalando 了解到,有一種簡(jiǎn)單的方法可以保證大規(guī)模的訪問(wèn)和可用性。這可以通過(guò)將更多職責(zé)轉(zhuǎn)移給最初收集這些數(shù)據(jù)并擁有所需領(lǐng)域知識(shí)的團(tuán)隊(duì)來(lái)完成。并且還通過(guò)將所有元數(shù)據(jù)信息和數(shù)據(jù)治理保持在中心位置。
相信我,空間不足以涵蓋所有用例。這是一個(gè)推動(dòng)市場(chǎng),企業(yè)希望從中獲得最大收益。
下一步是什么?擁抱數(shù)據(jù)產(chǎn)品思維
數(shù)據(jù)產(chǎn)品有幾種創(chuàng)新實(shí)踐,它們將不同的概念融合在一起,例如設(shè)計(jì)思維、待完成的工作理論,以及打破阻礙跨職能創(chuàng)新的組織孤島。到 2022 年,企業(yè)應(yīng)抓住機(jī)會(huì)并改進(jìn)其數(shù)據(jù)管理戰(zhàn)略,牢記 Web 3.0。
作者簡(jiǎn)介: Yash Mehta 是國(guó)際公認(rèn)的物聯(lián)網(wǎng)、M2M 和大數(shù)據(jù)技術(shù)專家。