С чего всё начиналось

В доме уже были:

— привод ворот;

— видеодомофон Hikvision;

— регистратор и восемь камер;

— Яндекс Станция Max;

— небольшой CHUWI HeroBox на Intel N100 с 8 ГБ оперативной памяти.

Покупать ещё один красивый фирменный хаб, который умеет дружить только со своей экосистемой, не хотелось.

Хотелось наоборот: заставить уже купленное оборудование разговаривать друг с другом.

Центральной логикой стал Home Assistant.

На HeroBox установил Proxmox и разнёс сервисы. Home Assistant занимается автоматизациями, видео/AI-контур живёт в отдельной VM, Asterisk — отдельно, VPN — отдельно.

Сам Proxmox стараюсь держать чистым. Если сервер одновременно является гипервизором, файловой помойкой, веб-сервером, VPN, системой видеонаблюдения и местом, куда «временно поставил одну утилиту», слово «временно» обычно означает «навсегда».

Первая победа: ворота заговорили

Home Assistant видит состояние ворот.

Когда они открываются, колонка в доме сообщает об этом голосом.

Казалось бы — готово.

Конечно, с первого раза ничего не заработало.

Сначала автоматизация отслеживала не то изменение состояния. В интерфейсе ворота были открыты, а сценарий продолжал жить своей жизнью и уверенно считать, что ничего не произошло.

Проверил реальные состояния сущности, переделал триггер.

И Яндекс Станция наконец произнесла:

«Ворота открыты».

Потрачено времени: неприлично много.

Количество слов в результате: два.

Удовлетворение инженера: максимальное.

Потом я зачем-то добавил камеры

У калитки есть камера. На въезде тоже.

Следующая мысль была вполне логичной: если перед калиткой появился человек или к дому подъехал автомобиль — почему бы системе самой это не понять?

Для анализа видео поставил Frigate.

Детекция работает через OpenVINO, а проверенные потоки аппаратно декодируются Intel QSV. Для маленького N100 это существенно: если заставить процессор программно пережёвывать несколько видеопотоков одновременно, он довольно быстро объяснит, что маленький мини-ПК не является серверной стойкой с двумя Xeon.

Хотя я постепенно пытаюсь убедить его в обратном.

Все восемь камер через аналитику я не гоняю.

Hikvision NVR продолжает делать то, что умеет хорошо: непрерывно записывает камеры на собственный диск.

Frigate получает прямые RTSP-потоки только там, где аналитика действительно нужна.

И тут началось самое интересное.

Автомобиль Шрёдингера

Frigate присылает событие:

«Обнаружен автомобиль».

Открываю кадр.

Автомобиля нет.

Зато есть кусок двора и абсолютная внутренняя уверенность нейросети, что где-то здесь определённо спряталась машина.

Начинаю настраивать.

Ограничиваю зоны.

Меняю минимальный размер объекта.

Фильтрую неподвижные машины.

Исключаю парковочное место.

Корректирую детекцию.

Frigate:

«Автомобиль».

Я:

«Где?!»

Отдельная история — автомобиль, который действительно стоит во дворе.

Для человека он припаркован.

Для нейросети это прекрасная возможность через некоторое время снова торжественно сообщить:

«Я нашёл машину!»

Да. Ту самую. Она никуда не уезжала.

Постепенно выяснилось, что нормальная видеоаналитика — это не настройка одного параметра confidence.

Нужна комбинация:

— правильной зоны;

— размера объекта;

— фильтра неподвижных объектов;

— геометрии кадра;

— разумного FPS детекции;

— понимания, какое событие вообще имеет смысл считать новым.

Сейчас автомобильное событие дополнительно ограничено зоной проезда: мало просто увидеть объект car, он должен появиться там, где появление машины действительно имеет смысл.

То есть умный дом — это не когда техника никогда не ошибается.

Это когда ты несколько часов объясняешь камере, что тень от столба не собирается уезжать.

Что в итоге уже умеет дом

Сейчас Home Assistant связывает между собой довольно разные системы.

Открылись ворота — появляется нужная реакция.

Человек у калитки — система определяет событие.

Для распознанных знакомых лиц у входа можно озвучить имя в доме.

Важные события с камер приходят на телефон.

Параллельно работает отдельный событийный архив: person и car сохраняются примерно по 30 секунд, событие открытия ворот — примерно минутой. Непрерывная запись NVR при этом остаётся отдельным слоем.

Часть домашних сценариев доступна через Telegram-бота.

Удалённый доступ к внутренней сети сделан через VPN, а не через россыпь открытых наружу портов.

При этом я специально не пытаюсь заставить Home Assistant заменить вообще всё.

Регистратор пишет видео.

Frigate анализирует.

MQTT переносит события.

Home Assistant принимает решение.

Asterisk занимается телефонией.

VPN занимается доступом.

Каждый слой делает свою работу.

Если аналитика временно остановится, регистратор не перестанет записывать камеры.

Мне такая схема нравится значительно больше, чем одна огромная система, падение которой превращает весь «умный дом» в выставку бесполезных датчиков.

Самый полезный вывод оказался довольно скучным

Когда начинаешь делать умный дом, очень легко пойти от оборудования.

Увидел красивый датчик.

Купил.

Потом пытаешься придумать, зачем он нужен.

У меня намного лучше работает обратный подход.

Сначала проблема.

Потом автоматизация.

Забывают закрывать ворота — голосовое напоминание.

Нужно знать, кто подошёл к калитке — камера и детекция.

Нужно быстро найти событие — отдельный архив.

Нужен удалённый доступ — VPN.

Нужна единая логика — Home Assistant.

А уже потом выбирается железо.

И второй принцип: если через полгода невозможно понять, зачем существует автоматизация и что её запускает, значит автоматизация получилась не очень умной.

Что дальше

Сейчас продолжаю доводить видеоаналитику, события автомобилей, архив и интерфейсы управления.

Отдельно собираю полноценный экран умного дома для телевизора — с реальной планировкой, состояниями помещений, камерами и событиями.

Но его покажу только тогда, когда он станет полностью рабочим интерфейсом, а не красивой картинкой «в разработке».

После этого про него будет отдельная история.

Ещё впереди сценарии по комнатам, гостевой режим, дальнейшая работа с автомобилями и номерами и отдельный нормальный разбор самого N100: сколько сервисов на нём живёт, что происходит под нагрузкой и где заканчивается разумный запас дешёвого мини-ПК.

Свои короткие заметки, рабочие решения, новые автоматизации и реальные ошибки собираю в Telegram-канале «Дом без магии» — @dom_bez_magii.

Без «идеального умного дома за выходные».

Зато с настоящими проблемами, настоящим железом и периодически — автомобилями в заборе.

Магии нет. Но иногда Frigate с этим не согласен.

https://github.com/Alangasar/xras_magnetic_storm

Ха! Нужная ж вещь! Надо её к себе добавить. Немножко кодинга/парсинга/дизигнинга, переписал код с питона на typeScript+PixiJS и вуаля! Теперь я еще и магнитные бури вижу с прогнозом на 3 дня. Красота!

Надо еще фазы луны добавить до кучи....

Прошлый мой пост был 16 дней назад, но это как будто вечность - скорость разработки с современными ИИ просто потрясающая, вручную проделанный объем работы измерялся бы месяцами, причем ближе к году. А если по вечерам в свободное время - то к паре лет.

Итак, что нового?

Вообще ДОФИГА мелких правок, фиксов, доработок и фич, я их все, конечно, тут перечислять не буду - всё есть в changelog. Спасибо ребятам, которые уже в группе в ТГ - репортят баги и поддерживают морально!

Из того, что стоит упомянуть:

• На карте можно видеть, как ездит ваш робот-пылесос и его маршрут. Вроде мелочь, а приятно.

• Теперь у стен есть толщина. Изначально я планировал, что это будет простая схема, не соответствующая реальности идеально, но теперь вы можете начертить план сантиметр в сантиметр, ваш внутренний перфекционист будет доволен.

• На плане видно, в какие окна и под каким углом сейчас светит солнце.

• Клик на устройство может делать что захотите: можно запускать свои автоматизации, сцены, включать\выключать и т.д.

• Виртуальные стены - иногда комнаты разделены условно, теперь это тоже можно отразить на плане

А еще много важных новинок вокруг самой разработки:

• Заведена ТГ-группа https://t.me/ha_houseplan

• В ней есть бот, который сообщает о релизах и умеет отвечать на вопросы о houseplan

• Заведён демостенд https://demo.houseplan.tech/ (логин\пароль demo\demo) - чтобы потрогать теперь не надо устанавливать

По-прежнему ждем добавления в официальный каталог HACS, очередь заметно продвинулась, думаю, дойдет до houseplan через 2-4 недели.

В общем, всех заинтересованных жду. У меня вы можете получить бета-релиз с фиксом бага или с запрошенной фичей уже через час после вашего сообщения в ТГ =)

https://github.com/Matysh/houseplan-card

P.S. все бесплатно и опенсорсно, на чистом энтузиазме!

Дом стал живым

- Новый режим заливки «Свет по источникам»: весь дом тёмный, включённые лампы дают пятна света своего цвета (RGB или температура), свет проникает через дверные проёмы в соседние комнаты. Радиус свечения настраивается для каждой лампы.

- Иконки отражают состояние как в HA: двери/окна открыты-закрыты, лампы горят своим цветом, тревоги (дым, протечка) пульсируют красным. Вместо иконки датчика можно показывать само значение (температуру, влажность).

- Подписи комнат превратились в карточки: имя + температура, влажность, сигнал Zigbee, свет («1 из 3»). Карточки можно двигать и растягивать.

Управление прямо с плана

- Лампы, люстры и группы света переключаются кликом по умолчанию — ничего настраивать не нужно. Правый клик по любому устройству — карточка HA.

- Выключатель на плане может управлять любым набором ламп (даже если сам он «тупой» или это кнопка-пульт): клик переключает все разом, значок показывает их состояние.

- У двери с замком в карточке появилась кнопка «Открыть/Закрыть замок». Сам замок кликом с плана не переключается никогда — только осознанной кнопкой.

Редакторы

- Три отдельных редактора вкладками: План (комнаты, двери-окна), Устройства (значки), Подложка (линии, фигуры, надписи — чистый декор). Просмотр — безопасный режим по умолчанию: ничего нельзя случайно сдвинуть.

- Рисование прокачано: объединение и разделение комнат (в т.ч. ломаной линией), комнаты внутри комнат (колонна, кладовка), «виртуальные стены» — условные границы зон, через которые проходит свет (рисуются пунктиром).

- Помощник выравнивания: направляющие линии от соседних объектов и подсветка углов, кратных 45° — лампы легко выстроить в ряд.

- Двери и окна ставятся кликом по стене с превью, знают свой датчик открытия и замок, рисуются открытыми/закрытыми вживую. Линейка показывает длину и угол в реальных метрах/футах.

Мелочи, которые заметите

- Новое устройство в HA появляется на плане с красной точкой — пока не откроете его настройки.

- План запоминает, где вы были: этаж и редактор восстанавливаются после закрытия вкладки.

- Значок-ссылка у имени комнаты ведёт в зону HA.

В планах - адаптация под планшеты, для постоянного использования в настенном режиме.

Живет по-прежнему тут: https://github.com/Matysh/houseplan-card

Очередь на публикацию в HACS уже подвинулась чуть ближе, но всё еще далеко))

Главное - все через интерфейс, не надо ничего кодить и собирать в других программах (разве что как подложку можно использовать стороннюю картинку, но можно и нарисовать прямо тут).

В общем, прошу потестировать, кому интересно, написать обратную связь.

https://github.com/Matysh/houseplan-card

Устанавливается через HACKS, или вручную.