发布于: Jan 30, 2022

无缝数据移动

由于数据存储在多个不同系统中,客户自然需要轻松在一切服务及数据存储方案之间(包括由内而外、由外而内以及周边移动)进行数据迁移。没有哪家分析服务商能够像亚马逊云科技这样将数据大规模迁移至最需要的位置——Amazon Web Services Glue 是一项无服务器数据集成服务,可帮助您轻松准备数据以进行分析、机器学习与应用程序开发。Amazon Web Services Glue 提供数据集成所需要的全部功能,可以在几分钟(而非以往的几个月)内获取洞见结论。Amazon Redshift Athena 还支持联合查询,可以跨多种存储方案在运营数据库、数据仓库以及数据湖间对数据执行查询,无需任何数据移动即可提供跨数据湖洞见,消除了设置并维护复杂的提取、转换与加载(ETL)管道的需求。

为了进一步降低跨多种数据存储方案的数据合并与复制门槛,上周我们还公布了 Amazon Web Services Glue Elastic Views 的预览版本。Amazon Web Services Glue Elastic Views 使开发人员可以使用熟悉的SQL在多种数据库及数据存储方案内创建物化视图,借此将跨数据存储方案进行数据合并与复制的周期从几个月缩短至几分钟。Amazon Web Services Glue Elastic Views 还能够处理从源数据存储到目标数据存储的数据合并与复制操作,持续监控源数据存储内的变更,并自动更新物化视图以确保用户始终能够访问到最新数据。

我们还公布了 Amazon Redshift 数据共享功能的预览版本。数据共享提供一种安全、便捷的方法,能够跨组织内部及外部的多个 Amazon Redshift 集群共享实时数据,彻底消除数据复制或移动带来的复杂性因素。客户可以通过数据共享功能沿用单计算集群内的数据分析方法,借此满足各项工作负载的性能要求并跟踪每个业务小组的使用情况。例如,客户可以建立一套中央ETL集群,并与多个商务智能集群共享数据以建立工作负载隔离与成本独立计算的机制。

统一治理

现代分析架构中的一大核心,在于对数据访问活动进行授权、管理及审计的能力。但这种能力的实现往往非常困难,因为跨组织内各类数据存储方案进行安全管理、访问控制与审计跟踪往往复杂且耗时。另外,这类方法也极易出错,因为它要求我们在全部存储系统中手动维护访问控制列表与审计策略,而不同的存储系统往往又有着不同的安全性、数据访问与审计要求。

凭借集中访问控制与策略,辅以列与行层级的过滤等功能,Amazon Web Services 为客户带来细粒度访问控制与治理选项,能够立足单一控制点对跨数据湖及专用数据存储系统的访问行为进行全面管理。

今天,我们还公布了 Amazon Web Services Lake Formation 行级安全功能的预览版本,希望降低人员及应用程序在共享数据时的安全保障难度。行级安全功能允许用户在行层级上过滤并设置数据访问策略。例如,您现在可以设置一项策略,确保区域销售经理只能访问其所在区域内的销售数据。这一层级的过滤功能,意味着我们不必为不同的用户组维护不同的数据湖表副本,极大节约了运营开支并消除了不必要的存储成本。

性能与成本效应

Amazon Web Services,我们致力于在所有分析服务中以最低成本提供最佳性能,并通过创新不断提高服务性价比。除了 Amazon Redshift Amazon EMR 等行业领先的服务之外,Amazon S3 还具备智能分层选项,可帮助客户将数据湖内的数据存储成本降低达40%。此外,Amazon EC2 则提供多达 350 种实例类型,最高 400 Gbps 以太网连接,以及在按需、预留及竞价实例之间灵活选择并切换的能力。202010月,我们宣布 Amazon EMR 正式支持搭载 Amazon Web Services Graviton 2 处理器的 Amazon EC2 M6g 实例,其在将成本降低达 35% 的同时,将性能提升达 15%。我们的客户也可以使用 Amazon Web Services Savings Plans 中的灵活定价模型,借此将 Amazon Web Services 计算资源成本削减达 72% 

为了给新的数据处理规模奠定坚实基础,我们上周还发布了面向全体客户的 AQUA (Advanced Query Accelerator) for Amazon Redshift  预览版本,并计划在 20211 月全面上线。AQUA 是一种新的分布式硬件加速型缓存,能够将计算与存储层相融合,借此实现 10 倍于其他云数据仓库的查询性能。AQUA 可在 Amazon Redshift RA3 实例上免费使用,客户无需任何代码变更即可直接享受 AQUA 带来的性能改进。

了解更多并立即体验

无论客户希望以怎样的方式使用数据,Amazon Web Services Analytics 都可提供相应的解决方案。我们提供最具广度及深度的专用分析服务组合,帮助您快速构建起 Lake House 架构。我们的产品组合包含可扩展性极高的数据湖、专用分析服务、无缝数据移动与统一治理机制,而且全部以成本极低、性能极强的形式向您交付。

感兴趣的朋友请参阅 亚马逊云科技 re:Invent 2020 大会上 亚马逊云科技 re:Invent 新增功能中的 Analytics 公告,并通过以下链接申请使用各项分析服务的预览版本。此外,您也可以参考 亚马逊云科技 re:Invent 2020 大会上的 40 多项分组讨论以深入了解特定议题。您可以访问研讨目录并选择 Analytics 列表以 回顾过往会议,并将后续即将召开的新议程添加至日历当中。

相关文章