Видеонаблюдение + Из сети

https://habr.com/ru/articles/783352/ - Оригинал

Камеры видеонаблюдения стали для многих стран обыденностью, например в Китае, они могут свисать гроздьями, через каждые 5 метров, по улице. Но в провинции России это все еще может быть в новинку. Я отношусь к видеонаблюдению по большей мере положительно. Ведь вид камеры, даже превентивно может предотвратить хулиганство (однажды я использовал муляжи камер в офисе:)), а главное это возможность контролировать объект наблюдения.

Этот пост про монтаж уличной камеры, на стену многоквартирного дома и программную реализацию - вывод изображения, без использования стандартной программы, оптимизацию, для размещения на raspberry pi.

Монтаж

Внутри помещения, я уже успешно использовал камеры фирмы vstarcam, по этому, лояльное отношение, подтолкнуло сделать заказ на али vstarcam CS64. Забегая вперед скажу, что это не лучший выбор - мыльная картинка, как будто нет даже заявленных 3 МегаПикселей.
План таков: повесить на внешнюю стену электрическую распределительную коробку, внутрь нее поместить блок питания, на крышку прикрепить камеру. Сигнал передается по wi-fi, питание - провести кабель через раму окна.

Примерный бюджет: ip-камера 3500р., коробка 600р., винтики-гаечки (продаются в леруа на развес) 5р., кабель/вилка/клеммы 200р.

Порядок работ:

1. Блок питания закинут в коробку(не стал его там крепить), отрезан кабель питания. На клеммы прикрутил новый кусок кабеля(брал его с запасом, но в итоге понадобилась только половина), кабель вывел из коробки;

2. В крышке коробки(она съемная), просверлил 4 отверстия и закрепил на ней камеру болтами с гайками;

3. Вылез из окна во внешний мир и под окном просверлил отверстия в стене, вбил дюпеля. Прикрутил открытую коробку, из которой, пока что, болтается моток кабеля.

4. Взял крышку с камерой, продел и подключил внутрь коробки кабеля(питание и не нужный lan), закрыл крышку, таким образом смонтировав камеру.

5. Просверлил в пластиковой раме окна отверстие наружу и всунул в него кабель питания, положил кабель канал, обрезал кабель до нужной длины и прикрутил вилку. Получилось довольно сурово, но это и к лучшему :)
   

Мотивом для дальнейшей части повествование было желание поделится с соседями видом со стены, ну и желание разобраться как захватывать видеопоток. Не было желания объяснять старшему поколению, как работает стандартное приложение eye4, по этому я решил реализовать веб страничку. Деплой будет на, уже обитавшую для домашних проектов, raspberry pi 4 4Gb.

В спецификации камеры было указано что она умеет в rtsp, его и выбрал. ip адрес камеры было просто вычислить в настройках маршрутизатора и задать его статичным. Предварительно надо было получить ссылку на видеопоток - а его нет! Я аж вспомнил nmap, а то мало ли с портом промахнулся. В документации нет ни слова, оказывается, в отличии от предыдущих моделей, в программе eye4, зайдя в настройки камеры надо включить опцию "незащищенный пароль". И как то напахнуло старыми китайскими девайсами, с непонятными настройками.

Итоговая ссылка rtsp://admin:password@192.168.0.119:10554/tcp/av0_0
Можно проверить ее подключившись например vlc
Пароль задавался в фирменной утилите.

Код

Программная часть будет использовать python (не судите строго, только год приручаю питона:)). Веб фреймворк Flask был выбран из-за простоты (для одностраничника больше и не надо); Для оптимизации, захват и генерацию кадров было решено разделить на разные процессы, с помощью multiprocessing (в надежде, что это поможет хилому rpi); Для захвата кадров видеопотока и их кодирования, оказалось лучшим вариантом будет использование библиотеки OpenCV.

Непосредственно код:

1. Файл скрипта на питоне webstreaming.py: (См. Оригинал)

2. Файл шаблона templates/index.html: (См. Оригинал)

Шаблон, состоит из нескольких тегов хтмл и думаю в объяснении не нуждается, по скрипту пройдемся более детально.

Здесь фласк приложение, при открытие страницы клиентом, обращается к генератору кадров, который выбирает изображение, постоянно создаваемое в отдельном процессе, захватывая видеопоток камеры.

Кеширование реализовано с помощью глобальной переменной last_frame, которая для обмена между процессами представляет из себя manager(данные внутри обернуты в list, так как это условие его использования). Это позволяет не генерировать для каждого нового клиента уникальные данные, они смотрят одни и те же картинки, не увеличивая нагрузку.

Сначала запускается процесс p, это позволит параллельно создавать кадры, не нагружая основной процесс.

Далее запускается фласк приложение app.run. Блок try, я добавил для того что бы нормально обработать ctrl-c в терминале. По его завершению, происходят методы завершения созданного процесса.

Функция создания кадра cache_frames. Именно в ней происходит основная нагрузка, которую надо оптимизировать, для маломощного одноплатника. Будем резать качество! Если у Вас будет довольно мощный сервер, вероятно не стоит повторять все советы(оставив хотя бы нормальное разрешение). Для начала я пробовал снижать частоту кадров, это приводило к появлению старых кадров и очевидному замедлению воспроизведения. Обнулить буфер камеры в VideoCapture можно только вытащив из него все кадры. Запускать cap.grab() в цикле это действенный механизм, но это приводит к недопустимой для меня нагрузке. В моей камере есть второй поток с более низким разрешением, это позволило снизить разрешение без cv2.resize, что существенно уменьшило нагрузку, позволив оставить штатную частоту кадров камеры. Все эти моменты могут различаться в разных моделях камер. Давайте пройдемся по строкам главной функции. Сначала мы открываем видеопоток(cap) и узнаем какой у него fps. Далее идет цикл в котором мы читаем кадр(cap.read). Закомментирована строка с изменением размера, так как удалось это сделать на стороне камеры. Далее происходит кодирование в jpeg, с уменьшением качества(imencode). По итогу мы преобразуем массив в необработанную строку байтов, так как именно такой результирующий вид требуется, и размещаем в наш кеш last_frame. Цикл каждый раз засыпает, что бы снизить нагрузку, интервал чуть выше фпс, что бы вычитывать все кадры из буфера камеры. По выходу из цикла ресурсы видеопотока будут освобождены(release).

Функция generate, при подключении клиента, генерирует хттп mjpeg ответ изображения с кадрами из кеша, который будет отображаться в браузере.

Вы можете заметить, что здесь нет работы над стабильностью. Например если соединение с камерой пропадет на время, скрипт просто сломается и такие ситуации надо обрабатывать.

Так же стоит провести работу по адаптации для нормального wsgi сервера. Это сделано, что бы не раздувать текущий текст и на своем гитхабе я постараюсь выложить доработанную версию.

Перекинув файлы на распберри пай и запустив их, нагрузка составила:

Я посчитал, что чуть более 20% использования cpu(BCM2711), хороший результат, не стеснит остальные проекты.

Осталось только пробросить порт на маршрутизаторе и можно делиться видео наблюдениями. Соседи рады, я рад :-)

Этот текст я написал, так как увидел скудность ру доков по rtsp+python. Возможно кого то это мотивирует на эксперименты с наблюдением и обработкой видеозахвата:) Всем удачи!

Материал был взят и переведен с Рэддита. Приятного прочтения!

1. Около 10 лет назад я работал менеджером табачного магазина. К нам стал заходить бомжеватого вида мужик. Обычно он покупал пару пачек и уходил. Ближе к зиме я поставил  в магазине несколько стульев, чтобы посетители могли посидеть и покурить (у нас это разрешалось). Этот парень сидит и курит. В магазин заходит другой парень и сходу начинает на этого наезжать. Не знаю, из-за чего у них разгорелся конфликт, но я выгнал обоих. Первому, судя по всему, это не понравилось. В следующий раз он появился через неделю, встал в полуметре от стойки и простоял несколько минут. Я спросил, что он хочет? Он купил пачку Мальборо и ушел, не сказав ни слова. Мне все это показалось странным, и я решил посмотреть запись с камеры у стойки. Оказалось, в той руке, которая мне была не видна, он держал револьвер. Я написал заявление в полицию. Приехали копы и изъяли запись с этой камеры. Не думаю, что это к чему-нибудь приведет. А на следующий день я уволился.

2. Работаю в отеле в ночную смену и должен смотреть за мониторами камер наблюдения. Этот отель не старый, но со странностями. Раньше меня пугала 14-я камера, потому что на ней постоянно были какие-то тени. Потом я понял, что это мотыльки летали перед камерой (она наружная). В последние два месяца начались проблемы с третьей камерой, которая установлена в бассейне. Обычно я на нее не смотрю, потому что в мою смену бассейн практически все время закрыт, но на монитор выводятся изображения со всех камер, поэтому мельком смотрю и на эту. Около 2 месяцев назад я пошел в бассейн помыть полы и убрать мусор. Я интуитивно чувствовал, что в бассейне что-то не так, но что именно, так и не понял. Я постарался побыстрее все закончить, а когда вернулся в диспетчерскую, то увидел, что камера в бассейне выключена. В мои обязанности не входит починка камер, поэтому я ничего не предпринял. Утром сказал об этом хозяйке. Она решила посмотреть запись. Там было отчетливо видно, что в какой-то момент появилась тень, после чего изображение с камеры пропало. Мне это не показалось странным, потому что окна бассейна выходят на автостраду, и по ночам бывают тени от проезжающих машин. Мы с хозяйкой пошли в бассейн. Оказалось, камеру кто-то снял. После этого случая мне перестало нравиться работать по ночам. Через месяц в бассейне повесили новую камеру. А две недели назад изображение с этой камеры замерцало, я стал внимательно смотреть и увидел темную сущность, по-другому и не скажешь, которая перемещалась по поверхности воды в бассейне. А потом она просто пропала на моих глазах. Во дворе отеля живет кот. Он меня хорошо знает, я его подкармливаю. Когда я относил мусор в бак напротив бассейна, кот прыгнул на окно бассейна, зашипел, будто кого-то атаковал. Это очень странно для кота, потому что он спокойный. А два дня назад я слышал стук в дверь бассейна, который раздавался изнутри. И там точно никого не могло быть. Я сразу глянул на камеру, но она тут же отключилась. Я понятия не имею, что все это значит.

3. Я работаю в ресторане. Я не охранник, но у нас стоят камеры. В конце дня мы с заведующей прибрались на кухне, а потом пошли в ее кабинет разбираться с документами. У нее на столе монитор, на который выводятся изображения с камер. Я краем глаза вижу, как в зале появляется черная фигура. Показываю это заведующей, и мы вместе пару минут не можем проронить ни слова. А потом эта фигура стала уменьшаться в размерах, пока не исчезла. Мы подождали несколько минут и вышли вместе. Это было жутко.

Похожие подборки без цензуры и купюр ежедневно выходят на моем канале https://t.me/realhistorys

Всем здоровья и добра!