fix(deploy): MQTT_HOST = containerk8s.<uid> (сервис платформы не называется resource_name) + разбор падения iot-service (PG: владелец таблиц)
This commit is contained in:
@@ -91,3 +91,58 @@
|
||||
остался в состоянии `not created` после неудачного apply и держит имя. По
|
||||
документации платформы такие инстансы через API не удаляются — удалять вручную
|
||||
в ЛК (deck). `terraform state list` пуст (в state ничего не записалось).
|
||||
|
||||
## 6. Второй `terraform apply` — падение iot-service и РАЗБОР через кластер
|
||||
|
||||
Инстанс-блокер был удалён в ЛК владельцем (`3bdaef8e…` → 404). Повторный apply:
|
||||
EMQX создался и работает, `nubes_http.iot_service` упал через ~10 мин:
|
||||
`Приложение не запустилось. Производится полный откат установки. Ошибка:
|
||||
jlib.k8s [correctReplicaActive] | Под(ы) не работают: 'containerk8s' (Deployment)`,
|
||||
затем таймаут клиента 600 с. Namespace iot-service откатан и удалён.
|
||||
|
||||
Разбор (kubeconfig `~/.kube/config` → кластер `iot-naeel`, контекст
|
||||
`tazetdinovn@gmail.com@iot-naeel`):
|
||||
|
||||
1. **Причина падения — PG, а не образ.** Эфемерный диагностический под
|
||||
(`kubectl run iot-diag-bad`, env — как в tfvars, удалён после проверки):
|
||||
```
|
||||
level=ERROR msg="devices store" err="store: init schema: pq: must be owner of table iot_devices (42501)"
|
||||
exit=1 reason=Error
|
||||
```
|
||||
Приложение падает на `CREATE UNIQUE INDEX IF NOT EXISTS` (`internal/service/store/open.go:64`
|
||||
+ SQL на `:29`): таблица уже существует и принадлежит ДРУГОЙ роли.
|
||||
2. **Владелец.** В БД `iotdb` инстанса `509145c3…` таблицы `iot_devices`,
|
||||
`iot_devices_pkey`, `idx_iot_devices_ns_device`, `tenant_credentials` принадлежали
|
||||
роли **`iot_service`** (создана 2026-08-16, пароль утерян — нет ни в vault
|
||||
платформы, ни в `IoT/pg.key`). Роль `iotservice` из tfvars — не владелец и без
|
||||
прав: `has_table_privilege('iotservice','iot_devices','SELECT')=false`.
|
||||
Данные: `iot_devices` 26 строк (в т.ч. `__bridge/iot-bridge`), `tenant_credentials` 31.
|
||||
3. **Вторая ошибка (сработала бы следующей).** `MQTT_HOST` из
|
||||
`local.emqx_internal_host` = `iot-emqx.<uid>.svc.cluster.local` — **NXDOMAIN**.
|
||||
Service в namespace платформы называется `containerk8s`:
|
||||
`containerk8s.<uid>.svc.cluster.local` → 10.98.42.138 ✅ (проверено `getent hosts`
|
||||
изнутри пода EMQX; тот же формат — `HISTORY/2026-08-16-session-log.md:824`).
|
||||
|
||||
### Исправление (2026-10-11)
|
||||
|
||||
- **PG** (через `psql` в поде `postgresqlk8s-0`, роль `postgres`):
|
||||
`BEGIN; ALTER TABLE public.iot_devices OWNER TO iotservice; ALTER TABLE public.tenant_credentials
|
||||
OWNER TO iotservice; ALTER INDEX public.iot_devices_pkey OWNER TO iotservice;
|
||||
ALTER INDEX public.idx_iot_devices_ns_device OWNER TO iotservice; COMMIT;`
|
||||
Пароли не менялись, БД не создавались, env EMQX не менялся.
|
||||
- `deploy/terraform/resources.tf` — `emqx_internal_host` → `containerk8s.<instanceUid>`
|
||||
(было `resource_name`).
|
||||
|
||||
### Перепроверка после правки (обязательна)
|
||||
|
||||
- Владельцы в PG: все 4 объекта → `iotservice` ✅
|
||||
- DDL приложения под `iotservice` по TCP (`sslmode=require`), ровно тот же SQL:
|
||||
`CREATE TABLE … / CREATE UNIQUE INDEX IF NOT EXISTS …` → `exit=0`, без 42501 ✅
|
||||
- Данные целы: `iot_devices` 26 строк, `tenant_credentials` 31 ✅
|
||||
- Диагностический под `iot-diag-ok` с `MQTT_HOST=containerk8s.<uid>`: `devices store ready`,
|
||||
`bridge device ensured`, `telemetry store ready`, `bridge: MQTT connected`,
|
||||
`bridge: subscribed filter=+/telemetry/+`; `/health`=200, `/ready`=200 `{"status":"ready"}` ✅
|
||||
- `terraform validate` Success, `terraform plan` = **1 to add, 0 to change, 0 to destroy**
|
||||
(EMQX не меняется — его env правки не требует); `terraform console local.emqx_internal_host`
|
||||
= `containerk8s.0d09ee82-c8f9-458f-88a3-89571e5676ed.svc.cluster.local` ✅
|
||||
- Диагностические поды удалены, в ns EMQX остались только `containerk8s` и `vmagent`.
|
||||
|
||||
Reference in New Issue
Block a user