Amazon EMR现已支持Apache Iceberg(amazonl)

1.软文推荐

2.软文推荐

3.软文推荐

Amazon EMR是一个托管集群平台，可简化在AWS上运行大数据框架的过程，以处理和分析海量数据。Amazon EMR6.5.0现已包含Apache Iceberg版本0.12。Apache Iceberg是一种开放的表格格式，专为巨大的PB级表格而设计。

Apache Iceberg为存储在数据湖中的数据提供了一种开源表格式，可帮助数据工程师管理复杂的挑战，例如在保持查询性能的同时管理不断变化的数据集。主要功能如下：

保持多个应用程序之间表的事务一致性，其中文件可以通过完全的读取隔离和多个并发写入的方式进行原子化的添加、删除或修改。 实施完整的模式演变以跟踪表随时间的变化。 发出时间旅行查询以查询历史数据并对更新之间的更改进行验证。 通过分区演化将表组织为灵活的分区布局，从而能够在查询和数据量发生变化时更新分区方案，而无需依赖物理目录。 将表回滚到以前的版本以快速纠正问题并将表恢复到已知的良好状态。 在大型数据集等的高性能查询中执行高级规划和筛选。

带有Apache Iceberg的Amazon EMR版本6.5.0现已在美国东部（弗吉尼亚北部）、美国东部（俄亥俄）、美国西部（俄勒冈）、南美洲（圣保罗）、欧洲（爱尔兰）、欧洲（斯德哥尔摩）、AWS GovCloud（US）、Amazon Web Services 中国（北京区域）、Amazon Web Services中国（宁夏）区域，未来几周将增加更多区域。

来源：idcspy.com/46450.html

本站声明:内容来源于网络，内容不代表本站立场，仅供阅读参考，文章版权归原作者“本公司cmy.cn”所有。如有侵权，请联系我们删除。

免责声明：本站发布的内容（图片、视频和文字）以原创、来自本网站内容采集于网络互联网转载等其它媒体和分享为主，内容观点不代表本网站立场，如侵犯了原作者的版权，请告知一经查实，将立刻删除涉嫌侵权内容，联系我们56dr_com，同时欢迎投稿传递力量。