Nail/IoT
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

iotpg: не возвращать ошибку при постоянной (poison) ошибке flush — данные уже обработаны построчно

Browse Source
This commit is contained in:
Repinoid
2026-10-11 08:37:17 +03:00
parent 994fc054b1
commit 89b5660a8b
1 changed files with 7 additions and 5 deletions
Download Patch File Download Diff File Expand all files Collapse all files
internal/storage/iotpg/iot_telemetry_store.go
+7 -5
View File
@@ -162,18 +162,20 @@ func (s *IoTPostgresStore) flushAll(ctx context.Context) error {
for ns, rows := range batches { for ns, rows := range batches {
if err := s.flushTenant(ctx, ns, rows); err != nil { if err := s.flushTenant(ctx, ns, rows); err != nil {
s.log.Error("iotpg: flush batch", "namespace", ns, "rows", len(rows), "err", err) s.log.Error("iotpg: flush batch", "namespace", ns, "rows", len(rows), "err", err)
if firstErr == nil {
firstErr = err
}
if isRetryableFlushErr(err) { if isRetryableFlushErr(err) {
if firstErr == nil {
firstErr = err
}
// Сеть/PG временно недоступен — возвращаем строки в буфер, повторим. // Сеть/PG временно недоступен — возвращаем строки в буфер, повторим.
s.mu.Lock() s.mu.Lock()
s.batches[ns] = append(s.batches[ns], rows...) s.batches[ns] = append(s.batches[ns], rows...)
s.mu.Unlock() s.mu.Unlock()
} else { } else {
// Постоянная ошибка: валидные строки уже вставлены построчным // Постоянная ошибка: валидные строки уже вставлены построчным
// fallback'ом (см. flushTenant), битые отброшены с логом. Повтор // fallback'ом (см. flushTenant), битые отброшены с логом. Ошибку
// бессмыслен — в буфер НЕ возвращаем (иначе залипание namespace). // НЕ возвращаем и строки в буфер НЕ возвращаем — данные обработаны,
// иначе consumer увидел бы ошибку и бесконечно гонял poison-батч
// через visibility timeout (ревью 🔴).
s.log.Error("iotpg: permanent flush error (валидные строки — построчно, битые отброшены)", "namespace", ns, "rows", len(rows), "err", err) s.log.Error("iotpg: permanent flush error (валидные строки — построчно, битые отброшены)", "namespace", ns, "rows", len(rows), "err", err)
} }
} }