Alluxio 在携程大数据平台的探索与优化

文章预览

导读   随着大数据技术的快速发展，携程作为旅游行业的领先企业，不断探索和优化大数据平台以提升数据处理和存储效率。本文将深入分享携程在Alluxio 技术应用方面的实践经验。 主要内容如下： 1.  携程大数据基础架构 2.  个性化透明访问底层存储系统 3.   实现自定义认证与支持多租户 4.  个性化全链路 CallerContext 5.  动态下发 Alluxio 客户端配置 6.  未来规划 7.  Q 分享嘉宾｜钱勇  携程数据基础架构组 大数据平台开发工程师   内容校对｜李瑶 出品社区｜ DataFun 01 携程大数据基础架构 携程大数据平台涵盖了调度平台、报表平台、实时查询、元数据管理、数据质量和数据传输等多个平台， 计算引擎支持 了  S park 、Hive、Presto/Trino、 Kyuubi  和 StarRocks 等多种引擎。在我们的架构中，Alluxio 作为分布式缓存层来加速计算引擎的读取，具体 来 说 ， ………………………………