非常方便的Mass Ingestion的有效使用方式

这篇文章是作为2022年InfoMathica圣诞日历第四天的文章而撰写的。

首先

各位,你们是否正在使用Mass Ingestion?
在这篇文章中,我希望再次强烈推荐IICS的Mass Ingestion!如果你能读完这篇文章,毫无疑问你会想要使用Mass Ingestion。

什么是Mass Ingestion?

IICS的一个功能是批量导入,它有以下的特点。不使用它太可惜了!

使用我们的服务,您可以在短短2至3分钟内创建数据导入作业。

image.png

2. 不需要复杂的设置。

image.png

3. 可以以超高速将大量数据一次性导入系统中。

image.png

4. 获取差分数据!

image.png

Mass Ingestion的四个功能

– 批量摄入
– 大规模摄取
– 大量进食
– 通量大

正如上面所提到的,Mass Ingestion 提供了四种数据导入功能。以下分别进行简单介绍。

1. 大规模文件摄取

image.png

2. 大规模应用程序输入

image.png

3.大规模数据摄入库

image.png

4. 大规模在线流媒体传输

image.png

大量摄入的适用场合

如果您已经阅读到这里,希望您对Mass Ingestion产生了兴趣并想要尝试。
但是,您可能会思考如何正确地使用Cloud Data Integration,对吗?

请首先检查以下几点。

・不需要对数据进行转换(更改),只需要进行数据的传输,可以吗?-> Yes or No?
・想要将数据传输到Cloud DataWareHouse,可以吗?-> Yes or No?
・希望定期复制应用程序和数据库的数据,可以吗?-> Yes or No?
・想要获取流数据,可以吗?-> Yes or No?

如果有一个是“是”的话,那就考虑使用批量摄取功能。

我已经将具体用例和用法区分制成了表格。

用途選択?コメントファイルデータのロードMass Ingestion大量なファイル形式のデータをロード・移動・コピーする場合、Mass Ingestionが活用出来ます。ELTMass IngestionまずDWHにロードを行った後に変更修正(Transform)を実施する場合にはMass Ingestionが適しています。MIでExtract+Loadの後にCDIでTransformもできます。Clowd DWHへのCDCデータ投入Mass IngestionMass IngestionはSnowflakeやGoogle BigQueryなどCloud DWHへのデータロードが大得意!速いです。DWHへのCDCデータレプリケーションMass IngestionMass Ingestionは単純なレプリケーションも得意です。Streamデータ取得・投入Mass IngestionStreamデータ連携はMass Ingestionです。RDBMSへのリアルタムデータ同期Data Integration投入先がRDBMSの場合はData Integrationの方が得意です。メインフレームからのデータ取得・投入Data Integration取得元がメインフレーム系(Adabas,IDMS,IMS,VSAM等)の場合はData Integrationで。データ変更をしつつCDCデータ投入Data IntegrationCDCでデータ取得を行いつつTransformをしながらターゲットに渡すのであればData Integrationで。

最后

请问您觉得怎么样?Mass Ingestion将来还会不断添加支持的数据源和目标(应用程序和数据库)。如果您还没有使用过,非常建议您借此机会尝试一次。这是如此好的功能,不使用实在太可惜了!(个人意见)。

请参考以下资料。

Informatica文档云大规模引入

广告
将在 10 秒后关闭
bannerAds