Компьютерное зрение на коленке: распознаем дорожные знаки и управляем роботом на ESP32 и Arduino

Вот важная новость с фронта ИИ: Каждый, кто осваивает Arduino, проходит одни и те же этапы. Сначала ты мигаешь светодиодом. Потом подключаешь датчик температуры — и вот уже температура выводится в монитор порта.

Потом сервопривод — и какая-то пластиковая штуковина начинает смешно поворачиваться туда-сюда. Потом появляется идея сделать систему автополива для цветов (которая в итоге их зальёт). Или мобильного робота, который будет «приносить тапочки».

Технические детали

Правда, через месяц робот будет пылиться на полке, а датчики с него переедут в следующий проект :). Дальше — закономерный этап: хочется управлять всем этим через интернет или со смартфона по каналу Bluetooth. Использовать Wi-Fi модули, заменить Arduino на ESP8266 или ESP32.

Поднял сервер, написал пару кнопок — работает. И если все это тебя зацепило, то возникает вопрос: а что дальше? Я тоже прошёл эти этапы.

И когда задумался, куда двигаться дальше, обратил взор на ИИ (Искусственный Интеллект). Не на тот, что «Skynet уничтожит человечество», а на самый простой — умение робота видеть знак «Стоп» и отличать его от пустой стены. Воодушевленный идеей, начал собирать информацию про ИИ на микроконтроллерах — и быстро понял, что обычный Arduino Uno с его 2 КБ оперативной памяти (RAM) и 16 МГц для нейросетей решительно не подходит.

Модель с распознаванием изображения туда не запихнуть. ПримечаниеКстати, это направление даже имеет своё название — TinyML (машинное обучение для микроконтроллеров с ограниченными ресурсами). Минимальные требования для простых задач (классификация звуков или данных с датчиков) — тактовая частота от 32 МГц, RAM от 32 КБ, Flash от 128 КБ.

Событие, по словам экспертов, усилит конкуренцию в сфере ИИ.