Статья XDA о подключении локальных камер к AI Home Assistant вызвала резонанс не просто так. По умолчанию большинство умных камер работают по принципу “сначала видит поставщик”. Home Assistant плюс Frigate плюс LLM внутри локального Ollama переворачивает эту логику: сырой RTSP поток идёт на локальный сервер, обнаружение объектов работает на Coral или видеокарте, а LLM обрабатывает только те кадры, которые уже пометил детектор. Ничего не уходит из дома.
Компоненты открыты и развиваются быстро. Семь десктопных приложений, чтобы AI-анализ камер Home Assistant действительно работал. Они расположены так, что первое — это точка входа для каждой установки, а последнее — это то, что становится менее критичным.
На что обращать внимание при выборе локального стека AI для камер
Система разделяется на четыре задачи:
- Получение RTSP или ONVIF потоков без прохождения через облако поставщика.
- Обнаружение объектов на текущей частоте кадров на недорогом оборудовании. Coral Edge TPU для USB-ускорителей, Frigate для программного уровня.
- Анализ сцены с помощью LLM, который может описать содержимое ограничивающего прямоугольника на естественном языке (“посылка на крыльце”, “енот в мусоре”).
- Маршрутизация событий в Home Assistant так, чтобы уведомления, автоматизация и панели могли реагировать.
Всё ниже работает полностью на вашем оборудовании на рабочем столе Windows, macOS или Linux или на локальном сервере.
Быстрое сравнение
| Приложение | Лучше всего для | Лицензия | Минимальные требования | Особенность |
|---|---|---|---|---|
| Home Assistant | Центр, к которому подключаются все остальные инструменты | Apache 2.0 | 2 ГБ ОЗУ | Лучший маршрутизатор автоматизации в этом списке |
| Frigate | Локальное обнаружение объектов с текущей частотой кадров | MIT | 4 ГБ ОЗУ, Coral или GPU | Самый быстрый локальный NVR, использующий MQTT |
| LLM Vision | Описание событий камер на естественном языке | MIT | Использует ОЗУ вашего LLM | Преобразует ограничивающие прямоугольники в читаемые предложения |
| Scrypted | Получение видеопотока и трансляция в Apple HomeKit | MIT | 2 ГБ ОЗУ | Лучший способ подключить не-HomeKit камеры к HomeKit |
| Blue Iris | Собственный для Windows NVR с полноценным интерфейсом | Proprietary | Windows PC | Тяжеловес Windows; надёжная запись |
| MQTT Explorer | Отладка сообщений между Frigate и Home Assistant | MIT | 200 МБ ОЗУ | Читает весь трафик, который излучает Frigate |
| Ollama | Локальный LLM, который используется в LLM Vision | MIT | 8 ГБ ОЗУ + GPU рекомендуется | Место, где работает мультимодальная модель |
Приложения
1. Home Assistant — Лучший центр
Home Assistant — это центр, на который указывают все интеграции камер в этом стеке. Он управляет моделью сущностей, автоматизацией, которая срабатывает на события Frigate, панелями, которые показывают последний снимок, уведомлениями на телефоны и интерфейсом управления LLM Vision. Даже если вы уже используете Blue Iris или Scrypted для записи, Home Assistant — это место, где живёт логика “енот в мусоре → включить свет → отправить уведомление”.
Где это отстаёт: HAOS опредёлен в том, что владеет своим хостом. В Docker вы теряете надстройки супервизора. Полная кривая обучения после основ.
Цены:
- Бесплатно, Apache 2.0
- Nabu Casa Cloud за $6,50/месяц добавляет удалённый доступ без открытия портов
Платформы: Linux (HAOS или Docker), Windows или macOS через VM/Docker Desktop.
Скачать: Home Assistant
Итог: Устанавливайте в первую очередь. Каждое другое приложение в этом списке предполагает, что оно уже установлено.
2. Frigate — Лучший локальный NVR и обнаружение объектов
Frigate — это часть, которая превращает сырой RTSP в “человек у двери”, “машина на подъезде” или “посылка доставлена”. Он получает потоки с ваших камер, запускает обнаружение на Coral Edge TPU или GPU, публикует события через MQTT для использования Home Assistant и записывает только события, которые вас интересуют. Релиз 2026 года добавил встроенный LLM-плагин, который передаёт снимки прямо мультимодальной модели.
Где это отстаёт: Использование ОЗУ растёт с количеством камер. Coral TPU официально рекомендуется и не всегда в наличии. Конфигурация YAML длинная в первый раз.
Цены:
- Бесплатно, MIT-лицензировано
- Платная надстройка обученной модели Frigate+ за $50/год опциональна
Платформы: Linux (Docker), лучше на x86_64 с USB-ускорителем Coral или видеокартой nVidia.
Скачать: Frigate NVR
Итог: Устанавливайте вторым. Это причина, по которой “AI камеры без облака” — это реальность.
3. LLM Vision — Лучше всего для читаемого описания событий
LLM Vision — это интеграция Home Assistant, которая передаёт снимки и видеоклипы с камер мультимодальному LLM и получает описание на естественном языке. Работает с Ollama, OpenAI, Anthropic, Google Gemini и любым совместимым с OpenAI эндпойнтом. На практике: Frigate помечает “человека” у входной двери, LLM Vision спрашивает Ollama “опиши, что делает этот человек”, и краткое описание попадает в уведомление на телефон.
Где это отстаёт: Описания настолько хороши, насколько хорош лежащий в их основе LLM. Небольшие модели зрения иногда галлюцинируют. Задержка на домашней видеокарте заметна.
Цены:
- Бесплатно, MIT
Платформы: Работает внутри Home Assistant; базовый LLM живёт там, где вы его хостите (Ollama на Linux, LM Studio, OpenAI в облаке).
Скачать: LLM Vision на GitHub
Итог: Устанавливайте после Frigate. Это то, что превращает ограничивающие прямоугольники в “кто-то оставил сумку у двери”.
4. Scrypted — Лучше всего для получения видеопотока и трансляции HomeKit
Scrypted — это швейцарский армейский нож для камер, которые не говорят на протокол, который вам нужен. Он получает RTSP, ONVIF, Ring, Nest, Reolink, Amcrest и переоткрывает их как HomeKit Secure Video, RTSP или WebRTC. В доме с смешанными “дешёвая камера, которая говорит RTSP” и “пользователь iPhone, который хочет HomeKit”, Scrypted — это переводчик.
Где это отстаёт: Сам по себе не детектор объектов такого же качества, как Frigate. Два инструмента, работающих параллельно, — это обычно.
Цены:
- Бесплатно, MIT
- Опциональный плагин NVR с подпиской для облачной синхронизации
Платформы: Linux (Docker), Windows, macOS.
Скачать: Scrypted
Итог: Устанавливайте, когда в доме смешаны камеры от разных производителей.
5. Blue Iris — Лучший собственный для Windows NVR
Blue Iris — это ветеран. Работает на Windows PC, записывает на локальный диск, интегрируется с Home Assistant через MQTT, и его панель является самой полированной в пространстве. Совместите с Frigate для AI или с его собственной интеграцией DeepStack/CodeProject.AI для обнаружения объектов.
Где это отстаёт: Только Windows. Проприетарный. Интерфейс — это Windows 2010-х годов по сути.
Цены:
- Однократная лицензия около $70 (LE) до $130 (Full)
- Доступна бесплатная пробная версия
Платформы: Windows.
Скачать: Blue Iris
Итог: Лучший выбор, когда машина Windows уже является постоянно включённым домашним сервером.
6. MQTT Explorer — Лучше всего для отладки конвейера
MQTT Explorer — это инструмент, который вы открываете, когда Frigate излучает события, Home Assistant не реагирует, и вам нужно увидеть трафик между ними. Он подписывается на любое дерево тем, показывает историю в прямом эфире и позволяет вам переиздавать сообщения для тестирования автоматизации. Когда конвейер стабилен, вы его не трогаете; пока вы его настраиваете, он необходим.
Где это отстаёт: Не совсем “приложение”, которое вы запускаете ежедневно. Доступный исходный код, а не полностью открытый исходный код.
Цены:
- Бесплатно
Платформы: Windows, macOS, Linux.
Скачать: MQTT Explorer
Итог: Установите один раз, используйте неделю во время наладки, забудьте о его существовании.
7. Ollama — Лучший локальный LLM для работы с LLM Vision
Ollama — это время выполнения, где живёт локальная мультимодальная модель. LLaVA и его потомки, Qwen2.5-VL, moondream и другие небольшие модели зрения загружаются с помощью пары команд и работают на видеокарте или Apple Silicon. LLM Vision указывает на эндпойнт Ollama и каждый снимок события проходит через него.
Где это отстаёт: GPU или Apple Silicon настоятельно рекомендуется для скорости. Только CPU возможна, но медленная. Выбор модели влияет на качество описания.
Цены:
- Бесплатно, MIT
Платформы: Linux, macOS, Windows.
Скачать: Ollama
Итог: Установите как движок для LLM Vision, когда вам нужно всё локально.
Как выбрать правильный
Если вы начинаете с нуля: Home Assistant в первую очередь, Frigate во вторую, LLM Vision в третью с небольшой моделью зрения на Ollama. Это опорный стек.
Если Apple HomeKit важен: добавьте Scrypted, чтобы открыть камеры не-HomeKit.
Если сервер дома — это уже Windows: Blue Iris берёт на себя роль NVR и передаёт события Home Assistant.
Когда Frigate не срабатывает на ожидаемую автоматизацию: MQTT Explorer, чтобы увидеть, что на самом деле публикуется.
Если облачные LLM приемлемы: пропустите Ollama и укажите LLM Vision на OpenAI или Gemini для более качественного описания за счёт утечки данных.
ЧЗВ
Может ли Home Assistant делать AI-анализ камер без Frigate?
Есть более лёгкие интеграции (обнаружение движения через саму интеграцию камеры, DeepStack, CodeProject.AI). Frigate — это то, где живёт текущее лучшее в своём классе локальное обнаружение объектов. Большинство людей в итоге переходят на него.
Нужен ли мне Coral Edge TPU?
Настоятельно рекомендуется. Frigate работает на CPU, но с меньшей частотой кадров. Один USB-стик Coral удобно обрабатывает 3-5 камер. GPU тоже работает, с большей стоимостью энергии.
Какой LLM лучше всего подходит для LLM Vision?
Для локального, Qwen2.5-VL и moondream — текущие фаворита на скромном оборудовании. Для облака GPT-5 или Gemini-2.5-Pro дают заметно лучшие описания за счёт приватности.
Могу ли я запустить это полностью без облака?
Да. Home Assistant + Frigate + LLM Vision + Ollama охватывает весь конвейер локально. Только уведомления на телефоны уходят из дома, и даже их можно маршрутизировать через самохостинг Ntfy или Gotify.
Работает ли это с беспроводными камерами?
Любая камера, которая излучает RTSP или поддерживает ONVIF, работает. Wi-Fi камеры подходят; стабильная сеть важнее, чем проводная камера.
