Apache Iceberg 赢得未来：2025 年如何前进

文章预览

作者 | 吴英骏 多年来，数据工程社区一直在争论开放表格式（Open table formats ）的未来。是 Delta Lake 凭借与 Databricks 的紧密集成取得胜利？还是 Apache Hudi 利用在流处理领域的早期优势脱颖而出？亦或是 Apache Iceberg 悄然崛起，成为行业主导者？ 2024 年底，答案已经明了。Databricks 收购了由 Iceberg 原始创建者成立的公司 Tabular ，这表明了其对 Iceberg 潜力的高度认可。同时，Snowflake 推出了基于 Iceberg 的目录服务 Polaris 。再加上 Starburst 和 Dremio 等知名查询引擎厂商对 Polaris 的支持，整个行业逐渐达成了共识——Apache Iceberg 成为事实上的开放表格式标准。 但这仅仅是故事的开始，展望 2025 年，多个关键发展将进一步巩固 Iceberg 在现代数据工程中的地位。 2025 年 Iceberg 的关键演进 1. RBAC 目录： 解决大规模权限管理问题 我们的不得不承认，由于缺乏 ………………………………