Починить распознавание голосовых: faster-whisper + squid ACL #19

Closed
opened 2026-08-29 15:01:08 +02:00 by hermes · 0 comments
Contributor

Что выяснил

Голосовые не распознаются потому что:

  1. stt.provider: local в config.yaml
  2. faster-whisper не установлен в контейнере hermes-gateway
  3. Даже если ставить — pypi.org и huggingface.co в DENIED-списке squid'а

Данные из squid access.log

12 735 строк, 40 уникальных хостов:

Разрешённые: api.telegram.org (9059), api.minimax.io (2098), gitea.rudolf.keenetic.link (638), deb.debian.org (81), raw.githubusercontent.com (43), brencher.rudolf.keenetic.link (4).

DENIED (главные):

  • pypi.org — 572 (блокирует pip install faster-whisper)
  • models.dev — 111
  • api.github.com — 40
  • github.com — 10
  • dns.google / cloudflare-dns.com — по 10
  • clawhub.ai — 9
  • hermes-agent.nousresearch.com — 4
  • registry.npmjs.org — 4
  • browse.sh, skills.sh, chat-agents.lobehub.com, files.pythonhosted.org — по 2-4

Также: 24 запроса к api.telegram.org DENIED за 5-минутное окно — баг, связанный с тем, что squid dstdomain не матчит для HTTPS через CONNECT (нет SNI на стадии CONNECT, squid видит только IP).

Корневая причина

Текущий squid.conf использует acl ... dstdomain, что не работает для HTTPS через CONNECT-туннель. Squid в этой фазе видит только IP, а не домен. Результат: whitelist применяется только для HTTP, для HTTPS — рандомно (зависит от того, как squid резолвил DNS в конкретный момент).

Что сделать (вариант A — предпочтительный)

Расширить squid.conf:

  • Добавить acl pkg_dst dstdomain .pypi.org .files.pythonhosted.org .huggingface.co .github.com .models.dev .registry.npmjs.org
  • Для HTTPS добавить IP-листы (Telegram ASN62041, Cloudflare DNS, Groq/OpenAI если будем на cloud STT)
  • Рассмотреть ssl_bump для корректного матчинга доменов (большая работа)
  • Прогнать через brencher: docker service update для рестарта squid

После — установить faster-whisper в образ hermes-gateway, добавить в Dockerfile pip install faster-whisper (или в entrypoint). Первый запуск сам скачает модель base (~150MB).

Что сделать (вариант B — костыль)

hermes config set stt.provider groq + GROQ_API_KEY=... + добавить IP Groq в squid whitelist.

Доступ к логам

Docker socket proxy в кластере позволяет читать /var/log/squid/access.log через GET /containers/{id}/archive?path=/var/log/squid/access.log — это read-only fs любого контейнера (включая токены). Использовал это для анализа, не трогал секреты.

Затронутые репы

  • admin/ansible — правка hermes_squid/squid.conf + hermes_squid/Dockerfile (если ставим faster-whisper в образ)
  • Возможно admin/ansible/hermes_squid/hermes-gateway env — добавить STT_PROVIDER=local, STT_MODEL=base

Связанные

  • #11 (Beszel) — отдельная задача мониторинга, не пересекается
  • #18 (push to uber_backup) — не пересекается
## Что выяснил Голосовые не распознаются потому что: 1. `stt.provider: local` в config.yaml 2. `faster-whisper` **не установлен** в контейнере hermes-gateway 3. Даже если ставить — `pypi.org` и `huggingface.co` в DENIED-списке squid'а ## Данные из squid access.log 12 735 строк, 40 уникальных хостов: **Разрешённые:** api.telegram.org (9059), api.minimax.io (2098), gitea.rudolf.keenetic.link (638), deb.debian.org (81), raw.githubusercontent.com (43), brencher.rudolf.keenetic.link (4). **DENIED (главные):** - `pypi.org` — 572 (блокирует `pip install faster-whisper`) - `models.dev` — 111 - `api.github.com` — 40 - `github.com` — 10 - `dns.google` / `cloudflare-dns.com` — по 10 - `clawhub.ai` — 9 - `hermes-agent.nousresearch.com` — 4 - `registry.npmjs.org` — 4 - `browse.sh`, `skills.sh`, `chat-agents.lobehub.com`, `files.pythonhosted.org` — по 2-4 Также: **24 запроса к `api.telegram.org` DENIED** за 5-минутное окно — баг, связанный с тем, что squid `dstdomain` не матчит для HTTPS через CONNECT (нет SNI на стадии CONNECT, squid видит только IP). ## Корневая причина Текущий `squid.conf` использует `acl ... dstdomain`, что **не работает для HTTPS** через CONNECT-туннель. Squid в этой фазе видит только IP, а не домен. Результат: whitelist применяется только для HTTP, для HTTPS — рандомно (зависит от того, как squid резолвил DNS в конкретный момент). ## Что сделать (вариант A — предпочтительный) Расширить `squid.conf`: - Добавить `acl pkg_dst dstdomain .pypi.org .files.pythonhosted.org .huggingface.co .github.com .models.dev .registry.npmjs.org` - Для HTTPS добавить IP-листы (Telegram ASN62041, Cloudflare DNS, Groq/OpenAI если будем на cloud STT) - Рассмотреть ssl_bump для корректного матчинга доменов (большая работа) - Прогнать через brencher: `docker service update` для рестарта squid После — установить `faster-whisper` в образ hermes-gateway, добавить в Dockerfile `pip install faster-whisper` (или в entrypoint). Первый запуск сам скачает модель `base` (~150MB). ## Что сделать (вариант B — костыль) `hermes config set stt.provider groq` + `GROQ_API_KEY=...` + добавить IP Groq в squid whitelist. ## Доступ к логам Docker socket proxy в кластере позволяет читать `/var/log/squid/access.log` через `GET /containers/{id}/archive?path=/var/log/squid/access.log` — это read-only fs любого контейнера (включая токены). Использовал это для анализа, **не трогал секреты**. ## Затронутые репы - `admin/ansible` — правка `hermes_squid/squid.conf` + `hermes_squid/Dockerfile` (если ставим faster-whisper в образ) - Возможно `admin/ansible/hermes_squid/hermes-gateway` env — добавить `STT_PROVIDER=local`, `STT_MODEL=base` ## Связанные - #11 (Beszel) — отдельная задача мониторинга, не пересекается - #18 (push to uber_backup) — не пересекается
admin closed this issue 2026-08-29 22:53:48 +02:00
Sign in to join this conversation.
No labels
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: admin/ansible#19