Гибель богов. Fable и ещё 10 LLM реорганизуют код. Сравнение

Значимый прорыв формирует отрасль ИИ: Korridzy 10 минут назад Гибель богов. Fable и ещё 10 LLM реорганизуют код. Сравнение Сложный 31 мин 252 Проектирование и рефакторинг * Искусственный интеллект Машинное обучение * Python * Natural Language Processing * Аналитика Из песочницы Русский и английский оригиналы статьи в моём блоге.

Это подробный разбор одного эксперимента. Я взял god node из реального LangGraph агента и попросил 5 американских и 6 китайских моделей сначала предложить, как её распутать, а потом оценить предложения друг друга. Дальше тремя разными способами пытался понять, кому из них в этом деле верить.

Технические детали

ОглавлениеИсходная задача. Что за god node и чем она опасна. Что именно делала нода plan.

Зачем это всё и как устроен эксперимент. Модели генерируют предложения. Чуть более подробно о каждом предложении.

Модели оценивают предложения. Подробнее о каждом разборе. Конкурс мокрых купальников.

Отраслевые последствия

Выбираем кто в чём хорош. Выбираем лучшее предложение. Сравнение анализов по тезисам.

Выбираем лучшего аналитика. Центр мнений и медоид. Опять выбираем лучшего аналитика.

Ещё разок выбираем лучшего аналитика. Какую модель брать в генераторы, какую в оценщики и на чём сердце успокоится. Исходная задачаЗнаете, бывает порой, что пишешь с ребятами учебного ИИ-агента для курса от Data Sanity и в пёстром вихре быстро нарастающего функционала вдруг обнаруживаешь, что у тебя в одном из внутренних агентов проекта граф состояний (LangGraph) выглядит вот так:Исходный граф god nodeКазалось бы, перед нами просто симпатичный осьминожек, чего волноваться.

Событие, по словам экспертов, усилит конкуренцию в сфере ИИ.