Распознавание лиц в Frigate: связка с Double Take и Home Assistant

Распознавание лиц на Frigate работает в домашних условиях — и это не фантастика. Связка Frigate + Double Take позволяет идентифицировать жильцов и гостей прямо на локальном сервере, без облаков и подписок. Если вы хотите собрать домашний face ID с интеграцией в Home Assistant, дальше — пошаговая логика того, как это устроено.

Как работает Frigate с распознаванием лиц

Frigate — это NVR-система с открытым кодом, которая обрабатывает видеопоток с камер и детектирует объекты с помощью нейросетевой модели. Сам по себе Frigate отлично распознаёт людей, автомобили и животных, но идентифицировать конкретное лицо — то есть сказать «это Антон, а не просто человек» — он не умеет. Для этого в цепочку добавляют отдельный инструмент.

Double Take — сервис face recognition для умного дома, который подписывается на события Frigate через MQTT и анализирует кадры с обнаруженными людьми. Он отправляет вырезанные фрагменты в движок распознавания лиц — чаще всего CompreFace или DeepStack — и возвращает результат: имя человека и процент уверенности. Double Take хорошо интегрируется с Home Assistant через те же MQTT-топики, что уже использует Frigate.

CompreFace и DeepStack — это отдельные микросервисы; каждый запускается в своём Docker-контейнере. CompreFace считается более точным при правильной базе фотографий, DeepStack чуть проще в начальной настройке. Оба работают локально: никакие лица не уходят во внешние сервисы.

Что нужно для сборки системы Frigate face recognition

Железо здесь — ключевой вопрос. Frigate без ускорителя справляется с несколькими камерами на обычном мини-ПК или NAS, но добавление Double Take и движка распознавания заметно увеличивает нагрузку на CPU. Для комфортной работы рекомендуется либо Google Coral TPU (USB или PCIe), либо сервер с дискретной видеокартой. Raspberry Pi 4 теоретически справится с одной-двумя камерами низкого разрешения, но на практике задержки будут ощутимые.

Минимальный стек выглядит так: Frigate в Docker, MQTT-брокер (обычно Mosquitto), Double Take, CompreFace или DeepStack. Home Assistant здесь опционален для детектирования, но если нужны автоматизации — он становится центром логики. Всё это можно поднять на одном хосте через docker-compose.

Камеры нужны с поддержкой RTSP-потока. Большинство IP-камер среднего ценового сегмента его поддерживают. Для распознавания лиц критично, чтобы камера у входа снимала лицо под небольшим углом и при достаточном освещении: если лицо занимает меньше 100 пикселей по высоте, точность резко падает.

Настройка Double Take для face recognition в умном доме

После запуска Double Take открывает веб-интерфейс на порту 3000. Там задают подключение к MQTT-брокеру, указывают адрес Frigate и выбирают движок распознавания. Любопытно, что Double Take умеет работать с несколькими движками одновременно и сравнивать результаты — полезно, если хочется подстраховаться.

База лиц формируется в CompreFace или DeepStack отдельно. В CompreFace есть собственный веб-интерфейс, через который загружают фотографии и создают «субъектов» — по сути, именованные профили. Чем разнообразнее фотографии одного человека (разное освещение, ракурсы, очки/без очков), тем лучше точность. На практике 10–15 фотографий на человека дают уже приемлемый результат, 30–50 — хороший.

Double Take публикует результаты в MQTT-топики вида double-take/matches/<имя>. Home Assistant подхватывает их через стандартную интеграцию MQTT и создаёт сенсоры. Дальше — дело автоматизаций: включить свет в прихожей для конкретного человека, снять сигнализацию, отправить уведомление, если в кадре незнакомец.

Сценарии использования Frigate face recognition

Самый очевидный сценарий — автоматическое снятие тревоги при возвращении домой. Когда камера у входной двери распознаёт кого-то из домашних, Home Assistant деактивирует охранный режим без ввода кода. Это удобнее, чем геолокация: работает сразу, не зависит от телефона в кармане.

Другой сценарий — персонализированное приветствие. Умная колонка произносит имя человека, включается «его» сцена освещения, термостат переключается на нужную температуру. Звучит как фантастика, но технически это три строчки автоматизации в Home Assistant после того, как сенсор от Double Take уже работает.

Уведомления о незнакомцах — пожалуй, самый практичный вариант для тех, кто не живёт постоянно дома. Если у двери появился человек, которого система не опознала, приходит push-уведомление с кадром. Порог уверенности можно настроить: при confidence ниже 70% Double Take сам помечает результат как неопределённый.

Кстати, систему используют и для отслеживания активности детей: когда ребёнок вернулся из школы, родитель получает уведомление без необходимости звонить. Это проще и надёжнее, чем геолокация на детском телефоне.

Совместимость и экосистема

Frigate интегрируется с Home Assistant через официальное дополнение из HACS — это самый распространённый путь. Double Take публикует данные в MQTT, поэтому технически работает с любой системой, умеющей читать MQTT-топики, не только с Home Assistant.

CompreFace поддерживает REST API, что открывает интеграцию с другими системами автоматизации — Node-RED, ioBroker, собственные скрипты на Python. DeepStack также имеет API и даже официальную интеграцию с Home Assistant, хотя в связке с Double Take он обычно работает как бэкенд, а не напрямую.

Ограничения есть. Frigate не работает с камерами, которые отдают только RTMP без RTSP, и плохо справляется с проприетарными протоколами вроде некоторых облачных камер. Double Take на данный момент активно не развивается основным автором — проект живёт за счёт сообщества, поэтому при обновлениях Frigate иногда возникают проблемы совместимости, которые решаются с задержкой.

Плюсы и минусы связки Frigate + Double Take

Плюсы:

• Полностью локальная обработка: лица не покидают домашнюю сеть.
• Гибкая настройка порогов точности и поведения при неопознанных лицах.
• Бесплатно и с открытым кодом — никаких подписок.
• Хорошая интеграция с Home Assistant через MQTT.
• Масштабируется: можно добавлять камеры и движки.

Минусы:

• Порог вхождения высокий: нужно понимание Docker и MQTT.
• Double Take развивается медленно, обновления нерегулярны.
• Качество распознавания сильно зависит от условий съёмки и базы фото.
• На слабом железе без ускорителя система работает с задержками.
• Настройка занимает несколько часов даже у опытного пользователя.

На что обратить внимание при выборе движка

Если у вас небольшая база лиц (до 10 человек) и хорошее железо — CompreFace предпочтительнее по точности. DeepStack проще запустить и он чуть менее требователен к ресурсам, что актуально при ограниченном железе. Оба движка позволяют уточнить базу со временем, добавляя новые фото.

Вы также можете попробовать newer-fork'и Double Take вроде NightOwl — они активнее поддерживаются сообществом и добавляют поддержку более новых версий Frigate. Прежде чем разворачивать всю систему, стоит проверить актуальность совместимых версий на форумах Home Assistant — это сэкономит несколько часов отладки.

Коротко о главном

FAQ

Можно ли настроить Frigate распознавание лиц без Home Assistant?

Да, Frigate и Double Take работают независимо от Home Assistant. Для автоматизаций достаточно любого сервиса, умеющего читать MQTT-топики — например, Node-RED. Home Assistant упрощает создание сценариев, но не обязателен.

Насколько точно работает face recognition в умном доме на реальных камерах?

При хорошей базе фото и нормальном освещении точность CompreFace достигает 90–95% для знакомых лиц. В сложных условиях — плохой свет, сильный угол, маска — результаты хуже. Порог уверенности настраивается вручную, что позволяет снизить число ложных срабатываний.

Double Take Home Assistant — это официальная интеграция?

Нет, Double Take — независимый проект с открытым кодом, не аффилированный с командой Home Assistant. Интеграция происходит через MQTT, который Home Assistant поддерживает нативно. Для установки Double Take обычно используют Docker или Home Assistant Addon через HACS.