StarRocks 存算分离在得物的降本增效实践

文章预览

  背景 OLAP 引擎在得物的客服、风控、供应链、投放、运营、AB 实验等大量业务场景发挥重要作用，在报表、日志、实时数仓等应用场景都有广泛的应用。 得物引入和使用 OLAP 引擎的过程中，每个业务都基于自己的需求选择当时最适合自己的引擎。现在得物内部同时使用阿里云上的 Hologres、ADB、ClickHouse 与ECS 自建的开源 ClickHouse 与 StarRocks 5 种引擎产品，从业务使用成本和运维维护的角度长远看都是不利的。 2024 年，我们开始向只保留 1 到 2 个引擎的方向努力。最近，我们把一套 4000+ 核的业务，最复杂的 ClickHouse 集群迁移到了存算分离的自建 StarRocks 上， 成本节约 40%，查询耗时降低一半 ， 单节点不可用导致的集群不可用耗时从 15 分钟减少到了 30s。 ClickHouse 在大数据量下的困境 ClickHouse 虽然单机性能首屈一指，但分布式架构存在水平扩展性、元 ………………………………