StorageGRID CloudMirror 复制延迟和检查点不一致
适用于
- NetApp StorageGRID 11.9
- 平台服务 – CloudMirror 复制
- 具有跨站点复制功能的多站点 StorageGRID 部署
问题
客户在扩展其 StorageGRID 环境并启用跨站点 CloudMirror 复制后观察到以下症状:
S3 对象摄取操作出现显著延迟。
大量挂起和正在进行的平台服务复制请求。
S3 请求持续时间激增以及大型活动请求队列(最多 1,500 个以上)。
由于检查点不匹配,目标存储桶中的目标表变得无法访问:
The_last_checkpoint (xxx000) is ahead of the latest checkpoint.parquet (xxxx30) in the target delta_log. This is causing the target table to be inaccessible with the error: LastCheckpoint(xxx000...) mentions a non-existent checkpoint file.StorageGRID 日志显示重复的错误,例如:
WARNING: [endpoint.go:zzz] RequestError: send request failedcaused by: Put "https://<endpoint>": unexpected EOF禁用 CloudMirror 复制稳定了客户端性能,但挂起的队列排空非常缓慢(例如,每 20 分钟约 50 个对象)。