Doris 混合负载性能瓶颈剖析与架构重构方案
本文由 Google Gemini 生成,仅供参考。 问题背景 本文是对近期数据仓库建设过程中,Doris 集群在高并发、混合负载下查询性能严重不稳定问题的深度复盘。集群的核心使命是同时承载后台批量的 ETL 任务与前台高并发的即席查询及报表任务。我们观察到,在 ETL 高峰期,查询服务的 Latency 和稳定性急剧下降,严重影响了数据消费端的体验。 ...
本文由 Google Gemini 生成,仅供参考。 问题背景 本文是对近期数据仓库建设过程中,Doris 集群在高并发、混合负载下查询性能严重不稳定问题的深度复盘。集群的核心使命是同时承载后台批量的 ETL 任务与前台高并发的即席查询及报表任务。我们观察到,在 ETL 高峰期,查询服务的 Latency 和稳定性急剧下降,严重影响了数据消费端的体验。 ...
运行环境 Flink version:1.13.3 Flink CDC version:2.2.0 Doris version:PALO-0.15.1-rc09 doris-flink-connector version:1.13.5-2.12-SNAPSHOT ...