Как я перестал бояться ESP-Claw и полюбил его

В сфере искусственного интеллекта произошло заметное событие. spc 13 минут назад Как я перестал бояться ESP-Claw и полюбил его Простой 8 мин 245 DIY или Сделай сам Arduino * Искусственный интеллект Интернет вещей Программирование микроконтроллеров * Как я встретил вашу маму ESP-Claw? Очень просто: не на Хабре, не в Google, а в одном дружном чатике, куда ссылку запостил коллега по несчастью. Здесь надо пояснить, что чат про одну специфическую IoT платформу для ESP и подобных контроллеров, а не про этот ваш ИИ, поэтому заметил я это дело одним краем глаза.

Не могу сказать, что именно меня зацепило, но я решил - почему бы и нет. Если в двух словах, то оно того стоило: попутно я освоил подключение к LLM по API-ключу, разобрался с OpenRouter, позаботился об экзотической лягушке, убедил ИИ написать Arduino-скетч для управления Tuya-совместимыми выключателями и розетками и заодно взгромоздил на десктоп Open WebUI - чтобы у меня был собственный ИИ-чатбот, с блекджеком и без облака. Это - описание опыта, а не выверенное до последней запятой руководство.

Технические детали

TL:DRОглядываясь с высоты полученного опыта. ESP-Claw - ИИ-агент, работающий на ESP32-S3. Нужен еще нормальный ИИ (LLM), который можно развернуть на своем железе (я не мог) или взять на стороне (я так и сделал).

После настройки ESP-Claw может общаться в своем личном чате, может через Telegram или китайские мессенджеры. Наверное много, я еще в процессе познания. Сразу скажу, что может у меня: пишет скрипты на Lua, умеет делать HTTP-запросы - смотрит данные с датчиков (может парсить страничку, может через JSON) и отправляет команды на Tuya-совместимые выключатели и розетки, умеет опрашивать датчики по расписанию.

Удобно, что некоторые задачи может выполнять без обращения к LLM, просто локально. То есть, если пользоваться платными сервисами, то считай, экономит деньги. Так ESP-Claw у меня опрашивает датчики, управляет выключателями и шлет уведомления в Telegram.

Отраслевые последствия

В комплекте еще какое-то количество стандартных инструментов кроме Lua, планировщика и HTTP-запросов (не смотрел), есть опция добавлять свои собственные (не разбирался). Этот инструментарий мне пока напоминает систему навыков у Алисы Яндекса, тоже пока не разобрался. Для меня - однозначно стоит.

Очень прикольная игрушка. ТеорияДействие первое: главный герой терпит фиаско. Прочтя начало про ESP-Claw, я вспомнил, что у меня в запасах вроде были какие-то ESP32.

Но по факту выяснилось, что у меня ESP32-S2, а для ESP-Claw нужна минимум ESP32-S3. Поэтому я немедленно заказал самую дешевую ESP32-S3 за 340 рублей на Aliexpress. За кадром доставка 77 рублейПовторюсь, на этот момент я не имел ни малейшего представления, зачем мне нужна ESP32-S3 и что такое ESP-Claw, но имел огромное желание просто позырить.

Событие, по словам экспертов, усилит конкуренцию в сфере ИИ.