(文章來(lái)源:金馬科技)
在推出基于微服務(wù)的第二代智能云服務(wù)幾年之后,Informatica的最新季度版本終于發(fā)現(xiàn)了無(wú)服務(wù)器錯(cuò)誤。它是一系列新功能中的一部分,這些新功能增加了用于管理數(shù)據(jù)管道和集成流傳輸?shù)男鹿δ堋?/p>
無(wú)服務(wù)器計(jì)算很自然地適合于數(shù)據(jù)攝取和集成過(guò)程,因?yàn)樗鼈兺ǔJ浅膳\(yùn)行的,并且根據(jù)來(lái)源的不同,它們也可能具有高度可變的資源消耗配置文件。無(wú)服務(wù)器的指導(dǎo)思想是消除提供“以防萬(wàn)一”的能力來(lái)處理高峰的需求,系統(tǒng)會(huì)根據(jù)流量自動(dòng)調(diào)整供應(yīng)。新的無(wú)服務(wù)器選項(xiàng)會(huì)自動(dòng)擴(kuò)展,并已內(nèi)置到高可用性和恢復(fù)中。客戶(hù)仍然可以使用基于服務(wù)器的選項(xiàng)來(lái)處理可預(yù)測(cè)的長(zhǎng)期運(yùn)行的工作負(fù)載。
盡管無(wú)服務(wù)器通過(guò)讓系統(tǒng)自動(dòng)配置資源來(lái)簡(jiǎn)化用戶(hù)的生活,但缺點(diǎn)是成本可能無(wú)法預(yù)測(cè)。作為新的無(wú)服務(wù)器選件的一部分,Informatica提供了一個(gè)計(jì)算器,該計(jì)算器將機(jī)器學(xué)習(xí)應(yīng)用到新的工作負(fù)載中,從而根據(jù)客戶(hù)對(duì)性能(通過(guò)并行處理)還是成本(通過(guò)單個(gè)節(jié)點(diǎn))進(jìn)行優(yōu)先級(jí)估算成本。
借助無(wú)服務(wù)器,Informatica從基于云的服務(wù)中竊取了一個(gè)頁(yè)面,這些服務(wù)已經(jīng)使無(wú)服務(wù)器成為基于數(shù)據(jù)管道的ETL和集成產(chǎn)品的主要內(nèi)容。其中包括AWS Glue,Azure數(shù)據(jù)工廠,Google Cloud Data Fusion甚至Databricks,它們添加了無(wú)服務(wù)器選項(xiàng)。
一個(gè)相關(guān)功能是應(yīng)用機(jī)器學(xué)習(xí)來(lái)幫助組織合理化其數(shù)據(jù)管道。由于基于云的低代碼/無(wú)代碼工具幾乎很容易構(gòu)建管道,因此客戶(hù)可以輕松地構(gòu)建令人困惑的一次性項(xiàng)目。Informatica的新工具將對(duì)管道進(jìn)行內(nèi)部檢查,掃描數(shù)據(jù)源,操作和目標(biāo),以識(shí)別哪些管道使用類(lèi)似的轉(zhuǎn)換模式,并指導(dǎo)用戶(hù)構(gòu)建可配置的模板,以減少擴(kuò)散并使它們更易于配置和維護(hù)。
而且,在攝取流時(shí),Informatica新增了一項(xiàng)功能,可以掃描Kafka存儲(chǔ)庫(kù)以跟蹤數(shù)據(jù)沿襲,就像對(duì)數(shù)據(jù)庫(kù)和文件源所做的一樣。在進(jìn)行數(shù)據(jù)準(zhǔn)備時(shí),Informatica的云服務(wù)可以推薦加入。Informatica的云ETL服務(wù)的可視化集成設(shè)計(jì)器通過(guò)推薦基于掃描源和目標(biāo)的轉(zhuǎn)換操作,進(jìn)而從數(shù)據(jù)準(zhǔn)備中竊取了頁(yè)面。
在增量更新中,去年推出的數(shù)據(jù)質(zhì)量服務(wù)中增加了重復(fù)數(shù)據(jù)刪除功能。盡管重復(fù)數(shù)據(jù)刪除對(duì)于Informatica來(lái)說(shuō)并不是什么新事物,但以前它只能在本地使用,也可以作為自帶許可證(BYOL)支持的一部分,以在Amazon EC2或其他云基礎(chǔ)設(shè)施服務(wù)上運(yùn)行Informatica Data Quality。通過(guò)菜單,用戶(hù)可以選擇元數(shù)據(jù)的邏輯或物理視圖,從而為數(shù)據(jù)工程師,業(yè)務(wù)分析師和數(shù)據(jù)科學(xué)家提供了多種視圖,從而增強(qiáng)了目錄的功能。該目錄已從數(shù)據(jù)庫(kù)資源的常規(guī)花名冊(cè)擴(kuò)展到從Microsoft Power BI,Qlik Sense,AWS Glue,Google Cloud,Snowflake等云服務(wù)中檢索元數(shù)據(jù),以及其他來(lái)源。
春季發(fā)布的結(jié)果是使用基礎(chǔ)圖形數(shù)據(jù)庫(kù)公開(kāi)了客戶(hù)主數(shù)據(jù),該數(shù)據(jù)庫(kù)提供了一種更直觀的表示和探索客戶(hù)關(guān)系的方式。新版本現(xiàn)已在AWS,Azure以及Google Cloud的 beta版中可用。
(責(zé)任編輯:fqj)
-
數(shù)據(jù)
+關(guān)注
關(guān)注
8文章
7067瀏覽量
89107 -
無(wú)服務(wù)器
+關(guān)注
關(guān)注
0文章
16瀏覽量
4075
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論