P1.2: индексация сообщений — tombstone-удаление O(1), receipt/uuid-индексы, tick по in-flight · c5b2c11f5d - SQS-service

P1.2: индексация сообщений — tombstone-удаление O(1), receipt/uuid-индексы, tick по in-flight

- models.Queue: deadIdx/receiptIdx/uuidIdx/liveCount/deadCount + примитивы
  (AppendMessage/RemoveIndex/Compact/CompactIfNeeded/Reset/EnsureIndexes/
  IndexOfReceipt/IndexOfUUID/MarkInFlight/ClearInFlight/InFlightIndexes/LiveCount).
  Удаление — tombstone за O(1), физическая чистка амортизированная.
- DeleteMessage/ChangeMessageVisibility(±Batch): поиск по индексу вместо скана
  среза; удаление без сдвига остатка.
- DeleteMessageBatch: tombstone вместо полной пересборки среза.
- processQueueTick: visibility/DLQ по индексу in-flight (O(in-flight)),
  retention — tombstone, в конце — CompactIfNeeded.
- send-пути: AppendMessage + LiveCount (OOM-лимит по живым).
- admin/metrics/persistence: учёт живых сообщений, индексы после загрузки из Redis.
- Redis-схема не менялась (сообщения и так в per-message HASH).

This commit is contained in:

Repinoid

2026-10-07 08:01:49 +03:00

parent e735563a04

commit c5b2c11f5d

15 changed files with 519 additions and 130 deletions

									
										app/metrics/gauge_updater.go
									
		+1
		-1
	
												View File
												
				@@ -53,7 +53,7 @@ func updateGauges() {

						tenantKey := parts[0]

						tenantQueues[tenantKey]++

						queue.RLockMu()

						tenantMessages[tenantKey] += len(queue.Messages)

						tenantMessages[tenantKey] += queue.LiveCount()

						queue.RUnlockMu()

					}