EchoEar: когда кошачьи ушки встречают искусственный интеллект.

От умной лампочки к собеседнику:

Представьте себе мир, где техника понимает вас с полуслова. Где не нужно тыкать в экран, набирать текст или искать пульт — достаточно просто сказать, и устройство ответит. Это уже не фантастика, а реальность, которая стремительно входит в наши дома.

Но за каждым таким "волшебным" устройством стоит сложная инженерная работа. Если вы когда-нибудь задумывались, как сделать свой собственный голосовой ассистент — не "Алису" или "Сири", а именно свой, уникальный, с собственным характером и возможностями, — то платформа EchoEar станет для вас идеальным стартом.

Что такое EchoEar? Это небольшое устройство в форме забавной кошачьей головы с динамиком, экраном-глазами и чувствительными "ушами" (на самом деле — микрофонами). Но внешность обманчива: внутри скрывается мощный микрокомпьютер, способный общаться с вами на естественном языке, распознавать жесты, реагировать на прикосновения и даже подключаться к интернету, чтобы использовать продвинутый искусственный интеллект.

Кому это нужно? Разработчикам, которые хотят создать прототип новой умной колонки. Студентам, изучающим электронику и программирование. Энтузиастам умного дома, мечтающим о собственном голосовом управлении. Да и просто любознательным людям, которым интересно заглянуть "под капот" современных гаджетов.

EchoEar — это одновременно и готовая игрушка, и мощный конструктор. Она создана компанией Espressif — той самой, которая придумала популярные модули ESP32, лежащие в основе миллионов интернет-вещей по всему миру. И сегодня мы детально разберем, из чего она состоит, как работает и что с ней можно сделать.

Для начинающих: Если вы пока не знаете, что такое микроконтроллер или PSRAM, не пугайтесь — мы будем давать простые пояснения прямо по ходу текста. Технические детали пригодятся, когда вы решите погрузиться в тему глубже.

Генезис и инженерная мотивация: как рождаются такие устройства

Платформа EchoEar разработана не на пустом месте. Инженеры компании Espressif поставили перед собой задачу: показать, на что способен их новый флагманский чип ESP32-S3 в области искусственного интеллекта. Для этого было решено создать не абстрактную плату с выводами, а законченное, почти товарное устройство, которое сразу демонстрирует свои возможности.

Партнером выступила платформа Volcano Engine, предоставляющая облачные AI-сервисы — речь идет о распознавании голоса, генерации ответов и синтезе речи. То есть EchoEar задумывался как гибрид: часть задач решается прямо на месте (например, распознавание команды "включись"), а сложные вопросы уходят в облако, где мощные нейросети формулируют развернутый ответ.

Прототип получил название «喵伴» (что переводится как "кошачий компаньон") — намек на внешний вид и интерактивность. Целью было создание устройства, которое взаимодействует с человеком максимально естественно: через голос, движение и касание.

Для начинающих: Представьте, что вы купили конструктор, который уже собран в красивом корпусе. Но при этом вы можете менять его поведение, перепрограммировать и даже подключать к нему свои датчики. Это не просто гаджет — это платформа для ваших идей.

Техническая эволюция ревизий.

Как и любой инженерный продукт, EchoEar прошел несколько этапов доработок. Сообщество разработчиков активно обсуждало недостатки первых версий, и компания прислушивалась.

Версия Что изменилось Почему это важно

v1.0 Первая версия с базовым набором: 16 МБ Flash (постоянная память) и 16 МБ PSRAM (оперативная память для вычислений). Позволяла запускать простые голосовые модели.

v1.2 Добавлены две сенсорные полоски для управления жестом скольжения (как сенсорная громкость на наушниках). Появилась возможность листать меню или регулировать звук без касания экрана.

v1.3+ Увеличен объем оперативной памяти до 16 МБ (а в некоторых версиях — до 32 МБ Flash). Улучшена разводка платы для снижения шумов в аудиотракте. Звук стал чище, а устройство — быстрее при работе со сложными алгоритмами.

Также разработчики из сообщества начали создавать нестандартные аксессуары: например, поворотную подставку на магнитах, которая позволяет наклонять и вращать "голову" EchoEar для лучшего улавливания звука.

Архитектура и спецификация компонентов: что скрыто внутри

Теперь заглянем внутрь устройства. EchoEar собран по принципу модульности — каждый блок отвечает за свою задачу.

Вычислительное ядро и память:

Сердце устройства — процессор ESP32-S3. Это не просто "микросхема", а целый компьютер на одном кристалле (SoC). Он работает на частоте до 240 МГц и имеет два ядра, что позволяет одновременно слушать микрофон и обрабатывать команды.

Для хранения данных используются модули семейства ESP32-S3-WROOM. Они выпускаются в нескольких вариантах:

· WROOM-1 — самый распространенный. Использует шину Quad SPI (4 линии данных). В версии N8R8 имеет 8 МБ постоянной и 8 МБ оперативной памяти.

· WROOM-2 — более продвинутый. Использует шину Octal SPI (8 линий данных), что удваивает скорость обмена. В версии N32R16V имеет 32 МБ постоянной и 16 МБ оперативной памяти.

Зачем столько памяти? В оперативной памяти (PSRAM) размещаются нейросетевые модели для распознавания голоса. Чем больше модель, тем точнее она понимает речь, особенно в шумной обстановке. Постоянная память (Flash) хранит прошивку и пользовательские настройки.

Для начинающих: Представьте, что Flash — это твердотельный накопитель (как жесткий диск в компьютере), а PSRAM — это оперативная память (ОЗУ). Чем больше ОЗУ, тем более сложные программы можно запускать.

Периферия ввода/вывода

· Микрофоны: Два цифровых MEMS-микрофона LMA3729T381. Они расположены под углом друг к другу, что позволяет определять, откуда исходит звук. Это называется beamforming — формирование луча. Устройство "слышит" вас даже на фоне телевизора.

· Динамик: Усилитель класса D с КПД более 85% и мощностью 3 Вт. Он экономично расходует заряд батареи и выдает достаточно громкий звук для озвучивания ответов.

· Экран: Круглый 1.85-дюймовый дисплей с разрешением 360×360 пикселей. Сенсорный, поддерживает касания и свайпы. На нем можно отображать эмоции (например, анимированные глаза) или текстовые подсказки.

· Датчик движения: Акселерометр и гироскоп BMI270. Он определяет, как вы наклонили устройство. Это позволяет управлять функциями простым поворотом "головы".

· Питание: Поддерживает работу от аккумулятора 18650 (такие же стоят в мощных фонариках) и зарядку через USB-C. Специальный чип BQ27220 следит за уровнем заряда, чтобы вы знали, когда пора подключить кабель.

Связь

EchoEar умеет подключаться к Wi-Fi (стандарт 802.11 b/g/n, только 2.4 ГГц) и Bluetooth 5.0. Это позволяет ему "общаться" с облачными сервисами, а также управлять другими умными устройствами в доме через Bluetooth.

Сравнительный анализ версий ESP32-S3-WROOM

Чтобы выбрать правильный модуль для своего проекта, важно понимать различия. Вот они в таблице:

Параметр WROOM-1 (N8R8) WROOM-2 (N32R16V)

Шина памяти 4 линии (медленнее) 8 линий (быстрее)

Пропускная способность ~320 Мбит/с ~960 Мбит/с

Максимальный объем PSRAM 16 МБ (при 3.3 В) 16 МБ (при 1.8 В)

Антенна Встроенная или внешняя (версия U) Только встроенная

Напряжение на спецвыводах 3.3 В 1.8 В

Когда что выбрать? Если вы делаете простого голосового ассистента — хватит WROOM-1. Если ваш проект требует обработки стереозвука высокого разрешения или сложной нейросети — лучше взять WROOM-2 из-за его скоростной шины.

Для начинающих: В большинстве случаев вам подойдет WROOM-1 — его проще найти, и он стоит дешевле. WROOM-2 пригодится продвинутым разработчикам, которые выжимают из устройства максимум производительности.

Экосистема и альтернативные реализации (Xiaozhi.Me & DIY)

EchoEar — не единственный представитель своего класса. Сообщество разработчиков активно создает аналоги и улучшает существующие решения.

Xiaozhi AI (esp_xiaozhi) — это программная платформа с открытым кодом. Она позволяет превратить любой ESP32-девайс в голосовой ассистент. Главная фишка — опциональность: вы можете выбрать, работать с облачным сервером xiaozhi.me или поднять свой собственный локальный сервер (например, с моделью Ollama).

Многие энтузиасты создают собственные DIY-поделки на основе ESP32-S3-WROOM-1U (версия с внешней антенной). Они добавляют более качественные аудиокодеки (например, ES8311), улучшенные микрофонные предусилители или встраивают устройство в старые радиоприемники.

Для начинающих: Если вы не хотите покупать готовый EchoEar, можете взять любую плату с ESP32-S3, микрофоном и динамиком и установить на нее прошивку от Xiaozhi AI. Получится почти то же самое, но дешевле и с возможностью экспериментов.

Функциональные возможности и режимы работы:

Чем же можно заняться с EchoEar?

1. Голосовое общение в реальном времени. Устройство слушает вас, отправляет аудио в облачный AI, получает ответ и озвучивает его. Задержка составляет 1-2 секунды — почти как в живом разговоре.

2. Локальное распознавание команд. Даже без интернета EchoEar слышит ключевое слово (например, "Привет, компьютер") и активируется. Это экономит трафик и ускоряет реакцию.

3. Управление жестами и касаниями. Можно крутить экран, проводить пальцем по сенсорным полоскам или наклонять устройство — все это меняет режимы работы.

4. Интеграция с умным домом. Через протокол MCP (Model Context Protocol) EchoEar может управлять реле, лампочками, моторами и другими устройствами. Например, сказать "Включи свет в гостиной" — и он передаст команду через Wi-Fi на вашу систему умного дома.

5. Программирование под себя. Вы можете написать свою прошивку на языке C++ (среда ESP-IDF) или использовать Arduino-совместимые библиотеки. Это открывает безграничные возможности: от будильника до метеостанции с голосовым интерфейсом.

Бенчмарки и ограничения: что нужно знать.

Как и у любого устройства, у EchoEar есть свои технические нюансы:

· Нагрев: При активной работе через Wi-Fi процессор греется до 65–70°C. Это нормально для таких чипов, но стоит обеспечить вентиляцию.

· Латентность (задержка): Полный цикл "вопрос-ответ" занимает 1.2–2.5 секунды в зависимости от скорости интернета и загруженности облачного сервера. Местное распознавание ключевого слова происходит за 50 миллисекунд.

· Совместимость: Для разработки нужна среда ESP-IDF версии 5.0 и выше. Все драйверы для периферии (экран, микрофоны, датчики) уже предоставлены в виде готовых библиотек.

· Стоимость: Заводской EchoEar стоит около 3 т.р. DIY-вариант на базе отдельной платы ESP32-S3 и дешевых микрофонов может обойтись в 800-1500 р.

Для начинающих: Если вас пугает нагрев — знайте, что это норма для производительных микроконтроллеров. Просто не закрывайте устройство плотной тканью и дайте ему "дышать".

Подведем черту всему сказанному:

EchoEar — это не игрушка, а полноценный инструмент для внедрения голосового искусственного интеллекта в ваши проекты. Он объединяет в себе высокопроизводительный процессор ESP32-S3, продуманную акустическую схему с шумоподавлением, удобный сенсорный интерфейс и гибкую программную экосистему.

Для разработчиков и инженеров это готовый стенд для тестирования AI-алгоритмов, не требующий пайки или проектирования печатной платы. Вы можете сразу перейти к написанию логики, а не тратить месяцы на аппаратную часть.

Для студентов и любителей это окно в мир современной электроники. Вы не просто читаете про нейросети, а видите их работу вживую, слышите результат и можете изменять его поведение.

Для энтузиастов умного дома это связующее звено между голосовыми командами и физическими устройствами — реле, датчиками, освещением. Один компактный девайс заменяет несколько разных пультов и приложений.

Если же вы просто любопытный человек, EchoEar подарит вам опыт общения с "живым" ИИ, который не стоит на месте, а развивается вместе с сообществом. Вы сможете увидеть, как технологии будущего постепенно становятся частью настоящего.

И последнее: не бойтесь сложностей. Сообщество вокруг ESP32 одно из самых активных в мире. Есть тысячи готовых примеров кода, переводов документации и ответов на любые вопросы. Начать работать с EchoEar так же просто, как подключить его к компьютеру через USB-кабель и загрузить первую прошивку.

Главное — сделать первый шаг. Остальное придет с опытом. А EchoEar станет вашим надежным проводником в мир умных голосовых устройств.

Часть 1

Новая серия мучений и непонятных дебрей.

В прошлый раз я остановился на том что подключил через блютуз и усилок и она звучала как в ведре.

В комментариях много говорили, да и я сам понимал что надо убавить резонанс и обклеить всё изоляцией от чего веса прибавилось почти на кг.

Потом решил экран приделать.

Для начала просто проверить на банальном скетче чуть ли не первое что предложила нейронка.

Начал думать как прямоугольник сунуть в арку потому что Нейронкам верить и доверять это то еще удовольствие.

Решил попробовать дать ей чёткие координаты.

Дано: разрешение экрана 128х64 что равно 128 точек по оси X и 64 по оси Y что думаю очевидно.

Это всё подстраивается под размер окошка и выставлял монтажные точки. которые будут границей.

Показалось это единственным возможным и правильным решением...

Далее лицевую панель тоже обложил изоляцией.

Ну и на лазере вырезал из вспененного коврика кольца что бы звук бился сразу в выход

После тестовый Скетч посмотреть как оно работает что бы окончательно вмонтировать лицевую панель и уже не прикасаться к ней.

Пока как то так.

Думал меньше времени потрачу на это, но тут даже конь не валялся по проделанной работе..

Чтобы управлять сервами на нашем самолете нужно передать с VR контроллера на ESP32 аналоговые значения c двух осей джойстика.

Так как контроллер у меня с Bluetooth, буду использовать библиотеку Bluepad32 для Arduino. Устанавливается она через менеджер плат, для этого нужно добавить в настройках ссылку на json.

После установки нужно выбирать плату уже из нового набора и прошивать со стиранием, это влияет на потребление во время работы.

Скетч собрал в DeepSeek и выложил на Github. Можно просто скопировать и залить на плату.
После прошивки порядок действий такой:

1. Ресет ESP32 с кнопки

2. Включить VR контроллер

3. Нажать одновременно @+A

4. Подождать несколько секунд, плата ищет беспроводной gamepad, когда найдет включается LED (pin22)

5. Нажать одновременно @+B

После этого в терминал Arduino будут сыпаться значения с осей и кнопок VR контроллера, а на пины 12 и 14 начнет подаваться сигнал управления сервами.

Припаял землю и сигнал сервы к контактам G и 12, а питание к ноге разъема аккумулятора.

Закрываю и проверяю.

Во время проверки выяснилось что одна из вертолетных серв сдохла – все время грелась, жужжала и дергалась. Из-за удара об землю или может стёрся проводящий слой на резисторе. Решено было ограничиться управлением одним рулём высоты, провести тесты, а креном заняться потом.

Сначала канцелярским ножом отрезал кусок потолочной плитки, зашкурил рисунок и вклеил 1мм карбоновый пруток. Затем обтянул цветным скотчем. Всё это должно усилить руль.

Весь пенопласт и самолетную пену режу 9мм канцелярским ножом со свежим лезвием.

Из пачки соуса швейным ножом вырезал петли.

На thingiverse не нашел качалок от своей сервы, начал переделывать то что есть, в итоге нарисовал собственный комплект под свои сервы. Модели положил на Github проекта.

Сделал прорези посередине торцов руля и вклеил туда ухупором петли.

Вырезал лезвием позади крыла сквозной отсек под серву и после установки забил оставшуюся полость.

Из 1мм карбонового прутка и канцелярской скрепки изготовил тягу.

Примотал к прутку куски скрепки с помощью нитки и смочил ее клеем. Циакринового не нашлось, весь высох, зато нашелся китайский двухкомпонентный, тоже просроченный, но удерживать нитку на месте способен.

Длина тяги вышла 22см, что немало, но так как усилие у нас идёт под прямым углом да и не такое оно большое получается, решил обойтись без боуденов и направляющих.

Канцелярским ножом вырезал отсек под плату ESP32 с аккумулятором.

Так же прорезал спереди углубления для грузов, с помощью которых можно будет плавно управлять центром тяжести.

Подбирал разные грузы для смещения ЦТ ближе к носу, попробовал припой, стальные шарики, болты и гайки M6, свинцовые пломбы, в итоге остановился на 10р монетах.

Фиксирую кабину куском велосипедной камеры.

Самолет стал весить 70г, немного увеличилась площадь крыльев. Покидал тушку с выключенной электроникой для проверки летных качеств и такое ощущение что немного отклонив сервой хвост вверх он начинает парить лучше чем до переделки.

В следующей части расскажу про прошивку ESP32 и подключение VR контроллера.