发布于: Feb 27, 2024

今天,亚马逊正在将 Amazon Kinesis Data Firehose 重命名为 Amazon Data Firehose。Amazon Data Firehose 提供了一种简单的方式来可靠地捕获和转换数据流,并将数据流以最佳方式传输到基于 Amazon S3 的数据湖、Amazon Redshift、Amazon OpenSearch Service、Splunk 以及其他用于分析和存档的第三方目标。名称变更将在亚马逊云科技管理控制台、文档和服务网页中生效。除此之外,未对服务终端节点、API、Amazon 命令行界面 (Amazon CLI)、Amazon Identity and Access Management (IAM) 访问政策、Amazon CloudWatch 指标或 Amazon Billing 控制台控制面板等做任何变更。您现有的应用程序将照常运行。

借助 Amazon Data Firehose,您可以降低创建和维护流数据传输管道的复杂性。Amazon Data Firehose 将代表您管理资源的预置和扩展。Amazon Data Firehose 集成了 Amazon Kinesis Data Streams (KDS)、Amazon Managed Streaming for Kafka (MSK) 以及其他 20 多个亚马逊云科技来源,用于提取流数据。此外,您可以选择使用 Direct PUT API 直接从数据来源提取数据。您还可以将数据流转换为 Parquet 和 ORC 等格式,并使用元数据属性对数据进行动态分区,以使用不同 S3 前缀将数据写入 Amazon S3 目标存储桶。您只需为通过该服务处理的数据量付费,没有最低消费,也没有设置成本。

要了解更多信息,请浏览 Amazon Data Firehose 开发人员指南。Amazon Data Firehose 现已在所有亚马逊云科技区域推出,其中包括由光环新网运营的亚马逊云科技中国(北京)区域和由西云数据运营的亚马逊云科技中国(宁夏)区域。