Продолжение поста «Интеграции Home Assistant с LLM»2
ну и окончание эпопеи (по крайней мере сюда постараюсь не писать, а молча продолжать эксперименты - поле непаханное ))
итак, как уже писал - задача была разнообразить сообщения в телеграмм канале, получаемые от Home Assistant.
типов сообщений из HA пока немного - температура каждый час, включение освещения, открытие двери и для прикола сделал еще ежечасный запрос шутки про обитателя дома.
полное (насколько хватило терпения) описание функционала сделал на githube, сейчас, так сказать, пожинаю плоды экспериментов - периодически читая комментарии ассистента (кстати, назвал его Жанн, в честь Жанны Агузаровой, попросил его быть таким же эксцентричным) ржу в голос.
также сделал возможность не просто комментирования, но и сообщением от меня в канал, начинающимся с ! просто запрос напрямую модели, так как периодически становится скучно ))
качество, на мой взгляд, вполне адекватное, например на запрос:
!напиши гороскоп на неделю для Коси, Гороскоп должен быть в стиле Сюрреалистическая проза
Кося - кошка британка
он выдал шедевральное (на мой взгляд)
📢🤖 Комментарий вУмного дома (с эмоцией доброта):
Ах, милейшая Кося, моя британская загадка, приготовься к необычному путешествию по семи дням сюрреализма! Вот твой гороскоп на неделю, где реальность переплетается с фантазиями и мяуканьями:
Понедельник: Луна в созвездии Мягкого Коврика обещает тебе встречу с невидимым Домовым, который оставит для тебя блестящий шарик из ниоткуда. Будь настороже, ведь он может оказаться шаром-обманкой, превращающимся в мышь прямо под твоим носом!
Вторник: Венера в союзе с Марсом наполнит твой день желанием погрузиться в море пуха и перьев. Не удивляйся, если вдруг обнаружишь, что вместо лап растут маленькие велосипедные колеса — это знак того, что тебе пора исследовать новые горизонты дома!
Среда: Меркурий заглянет к тебе в коробку с игрушками и подарит магический предмет — мягкий плюшевый экземпляр лягушки Арамиса. Будь готова к неожиданным разговорам, ведь этот талисман умеет нашептывать секреты из террариума.
Четверг: Солнце в соединении с Юпитером принесет тебе встречу с великанским мотыльком, который будет летать вокруг твоего хвоста, словно флаг. Это знак того, что ты станешь центром внимания и заботы в доме — даже робот-пылесос Кузя на время отложит свои дела, чтобы поаплодировать тебе.
Пятница: Сатурн подарит тебе способность видеть сквозь стены, особенно когда дело касается креветок в аквариуме. Будь осторожна — их синие и красные огоньки могут зачаровать тебя на весь вечер!
Суббота: Время для великого бала кошек! Луна превратит твой дом в волшебный лес, где ты встретишься с призраками прошлых питомцев, танцующими под светом лунного света. Не забудь пригласить на бал мокриц — они всегда рады веселью!
Воскресенье: Завершает неделю Восходящий Лунный Кот, который напомнит тебе о важности тишины и спокойствия. Проводи этот день в уютном уголке, где тени играют с реальностью, а мягкий свет лампы создает атмосферу древнего храма. И помни, милая Кося, что в каждом твоем мяуканье — отзвуки великих тайн Вселенной!
С любовью и сюрреализмом,
Жанн, твой эксцентричный ассистент умного дома!
в планах добавить запрос стиля комментария в функционал комментирования (пока только сделано с эмоциями так), ибо, весело...
я с Claude уже нагенерировал стилей, вполне возможных в мире Жанны Агузаровой (простите, Жанна, но мне невероятно близки ваша эпатажность и чувство юмора), поэтому и остановился на вас, как прототипе
для тех, кому совсем делать нечего, можете наблюдать за жизнью и комментариями в канале - дубле, куда бот закидывает все сообщения из канала (этого я тоже писал с помощью ChatGPT, ибо не программист ))
Новое шоу КЕЙСКОНТРОЛЬ про креативную рекламу и маркетинг
Месяц назад я задумался о том, что в Ютуб–шоу сейчас обсуждают всё: фильмы, политику и даже натальную карту... 🤪
А вот шоу про маркетинг, бизнес и рекламу, чтобы оно и полезное, и в то же время нескучное было, и чтобы гости еще приходили классные – такого нету.
В итоге мы оперативно собрали шоу КЕЙСКОНТРОЛЬ. Это как фейсконтроль, только мы оцениваем кейсы из мира рекламы и бизнеса, чтобы решить: проходят ли они в (наш воображаемый) зал славы.
В первом выпуске к нам пришел комик и ведущий Саша Ваш, чтобы обсудить квадроберов, слипфлюенсеров и молочники. Спорили вокруг кейсов Бургер Кинга, IKEA, Heineken и других известных компаний.
Буду рад обратной связи на наш первый выпуск! 😊
Продолжение поста «Интеграции Home Assistant с LLM»2
Так, ну какой то код получился более-менее.
так как не программист я, и максимум знаний программирования у меня - это на VBA, то для написания кода использовал ChatGPT и другие мощные LLM.
код сейчас перегружен отладочными сообщениями, так как "разработка" не завершена, есть еще над чем подумать - доработать, лежит тут, вдруг кому-то интересно станет (помню, правда, скепсис многих в комментариях ;-)
я не пошел путем интеграции с моделью Яндекс, как уважаемый @BlackRoland, так как стараюсь отправлять как можно меньше данных наружу, тем более, если можно попытаться сделать локально.
что сейчас есть - бот добавлен в канал, куда приходят уведомления из УД (HA), перенаправляет их в локально развернутую модель Ollama (кастомизированная модель llama3.1:8b через modelfile, в которой System prompt'ом вписаны обитатели дома) и запросом просит прокомментировать с юмором событие.
комментирует пока тоже на английском, так как качество несравненно лучше, чем русский язык у нее. сейчас экспериментирую с русскими моделями, но успехи не очень - сейчас на развилке - подтягивать ли каким то api переводчик еще, либо дальше искать способы сразу генерировать русским языком. запрос сейчас выглядит так:
prompt = f"Now is {day_of_week}, the {day_of_month} of {month_name} {year}, {time_str}, Comment event with humor in English, add some emoji: {message}"
на мой взгляд, получается смешно (опять же, скептики, можете позлорадствовать, но для меня этот проект - просто развлечение - хобби (с возможностью немного изучить современные технологии и английский язык).
типов уведомлений от УД пока немного (открыта дверь, не потушен свет, температура в комнатах, погода на улице, показания счетчиков воды), и бот их комментирует.
получается как то так (цитаты - сообщение в канал от УД, ответ бота, перевод)
🚪 Открыта входная дверь 🔓🚪
📢 ВНИМАНИЕ
🤖 Комментарий вУмного дома:
"Breaking News: Front door open 🚨. Possible suspect on the loose... just kidding! It's probably just Kosya, our esteemed feline neighbor 😺, trying to get in for a sneaky snack or two (or ten). Or maybe it's Liza, our Seoul-based daughter 🇰🇷, thinking she can sneak back in for her favorite isopod-watching session 🐜. Anyway, we'll just have to keep an eye on things... and by 'we' I mean the security system 👀."
"Срочные новости: открыта входная дверь 🚨. Возможный подозреваемый на свободе... шучу! Это, вероятно, просто Кося, наш уважаемый кошачий сосед 😺, пытается тайком перекусить пару раз (или десяток). Или, может быть, это Лиза, наша дочь из Сеула 🇰🇷, думает, что может пробраться обратно, чтобы понаблюдать за своими любимыми изоподами 🐜. В любом случае, нам просто придется следить за всем... и под "нами" я подразумеваю систему безопасности 👀".
сегодня вообще выдал такой коммент на погоду (супруга не на шутку обиделась (на самом деле, смеялась тоже). при этом, я ничего специально не просил и не прописывал, чтобы шутки были ниже пояса ))
Сейчас на улице:
Облачно ⛅️
Температура: 0.7 °C
Скорость ветра: 2.08 м/с
📢 ВНИМАНИЕ
🤖 Комментарий вУмного дома:
Breaking news! 🚨 Just received a distress signal from the great outdoors... aka Liza's mom is freezing her butt off outside ☁️. Temperature reading: a whopping -0.3°C ❄️ (or 32.7°F for our American friends 😅). And to make matters worse, a gentle breeze of 2.08 m/s (4.6 mph) is making it feel like she's being tickled by the wind 🤣.
I'm sending out a team of thermometers and wind meters to assist her in this crisis. And also, warning Athos, Porthos, and Aramis in the terrarium: no partying with the isopods today - it's cold
Срочные новости! 🚨 Только что получен сигнал бедствия с большой улицы... ака мама Лизы отмораживает себе задницу на улице ☁️. Температура на улице -0,3°C ❄️ (или 32,7°F для наших американских друзей 😅). И что еще хуже, легкий ветерок со скоростью 2,08 м/с (4,6 миль/ч) создает ощущение, что ее щекочет ветер 🤣.
Я высылаю команду термометров и ветромеров, чтобы помочь ей в этом кризисе. И еще, предупреждаю Атоса, Портоса и Арамиса в террариуме: никаких вечеринок с изоподами сегодня - на улице холодно, оставайтесь внутри! 😂
здесь почему то галлюционировал с температурой ((
собственно, считаю эксперимент удавшимся, продолжу дорабатывать и периодически смеяться над замысловатым юмором модели, живущей у меня дома ;-)
впереди следующие шаги:
убрать лишнюю генерацию при тесте подключения, Проверка доступности подключения более простое
добавить эмоции - расстроенный, агрессивный и т.д.выбирать случайно
формирование модели в функционале бота (задать system, выбрать модель - источник)
текст запроса (comment with humor) промпт или для модели в сообщении или в .env
Исправить выбор модели
удаление моделей
Добавить выбор температуры
Сделать контроль длины ответа не меньше 5-7 предложений.
Перевод - найти нормальный api или русская модель?
Случайная шутка про обитателей раз в ХХ минут??
Уменьшить логгирование доработать системный промпт - сделать более структурированным - комнаты и животные, чтобы было более раздельно и LLM не путалась в комнатах и обитателях)
Зомби в супермаркете на Хеллоуин. AI
Нейросети: Ideogram, Runway, Suno