知识条目 / Apache Doris

Apache Doris 导入报版本过多或 compaction 不足如何处理?

先看 tablet 版本与 compaction score,再检查导入频率、分桶与 BE 磁盘;持续小批量导入是常见根因。

Doris 的每个导入批次会生成 rowset 版本,compaction 负责合并。版本过多会触发导入失败或查询变慢,需要从写入模式与 BE 资源两方面处理。

处理步骤

  1. 确认版本与 compaction查看 tablet 状态与 compaction score,定位高版本 tablet 所在的表与分区。
  2. 检查 BE 资源观察 BE 的 CPU、磁盘与 compaction 线程,确认是否存在 IO 瓶颈。
  3. 优化写入与分桶减少小批量导入、合并写入、合理设置分桶数量与副本数。
  4. 恢复与观察等待 compaction 追平或临时降低导入频率,确认版本数恢复后逐步恢复写入。

示例

SHOW TABLET;
SHOW PROC '/compaction';
SHOW BACKENDS;

频繁执行 schema change 或大量小文件导入会加重 compaction 压力,应先治理写入方式。

关键词

doris · compaction · 版本 · tablet · 导入 · 分桶 · be

官方文档

同库知识