稳定、省钱的 ClickHouse 读写分离方案：基于 JuiceFS 的主从架构实践

文章预览

作者 | 马涛 Jerry 是一家位于北美的科技公司，利用人工智能和机器学习技术，简化汽车保险和贷款的比价和购买流程。在美国，Jerry 的应用在其所属领域排名第一。 随着数据规模的增长，Jerry 在使用 AWS Redshift 时遇到了一些性能与成本的挑战。Jerry 重新设计了系统架构，使用 ClickHouse 后，数据查询性能提升了 20 倍，并大幅降低了成本。但在使用过程中也遇到了磁盘损坏和数据恢复等诸多存储挑战。作为初创公司，Jerry 希望避免对 ClickHouse 集群进行大量的维护工作。 于是，Jerry 采纳了 JuiceFS， 并创新性地使用其快照功能实现了 ClickHouse 主从架构。这一架构不仅确保了数据的高可用性和稳定性，还显著提高了系统的性能和数据恢复能力。在超过一年的时间里无停机和无复制错误，并提供了可预期的性能。 01 Jerry 数据架构： 从 Redshift 到 ClickHouse ………………………………