Тестировал как зерокод. Самый большой облом агента в том, что через полчаса агент начинает выдавать: The generated has been interrupted for some reason.
Из-за этого приходится создавать новый чат и заново объяснять Гигакоду задачу, одна неучтенка — и почти отлаженный код ломается, приходится начинать всё заново, в моем случае для тестов написан спецмодуль-анализатор, он весьма чувствителен к изменениям, от него зависит финальный код...
Так вот, этот суперпуперагент в каждом новом чате пытается его изменить, если он меняется, то всю отладку приходится начинать заново, когда отладка почти завершена, он опять выдает: The generated has been interrupted for some reason.
И всё начинается заново, в тестовом проекте агент пошел в разнос и наплодил кучу разных копий анализатора для каждого аспекта отладки, каждый новый чат — и появляется измененная копия анализатора...
Стоит отметить, с другим ИИ работает неплохо, но это не защищает от: The generated has been interrupted for some reason. А в новом чате от его ошибок не спасает даже подробное описание теста, цели, задачи, результата.
Чаще всего гигакод-агент просто зацикливается на своих тестах, и приходится его прерывать. Стоит отметить, удобство в нем есть, сам создает новый проект, документацию, головные файлы и всё такое, но в анализе он слабоват...
За неделю теста этого агента понял, что лучше давать ему инструкции через промты от ИИ, который шарит в программировании, и молиться, что чат не упрется в выше указанную ошибку и вы успеете закончить модуль, но с оркестратором он справился на ура, хватило одного промта, чтобы он подцепил все модули к нему, а еще с пулом тоже справился, но с анализатором он работает отвратительно.
На основе данных анализатора неспособен эффективно завершить модуль, зацикливается, пока не остановится из-за: The generated has been interrupted for some reason, после всё заново.
Для теста агента создавал почтового сортировщика (наладить сортировку было той еще задачей) для скачивания вложений только отборных писем, Телеграм-бота (загрузка постов из группы), оркестратор для отказоустойчивости моделей, авторизатор (своего рода скрипт авторизации на интернет-портале через Телеграм-бота, за 3 дня этот модуль не продвинулся вперед, т.
к. из-за каждого нового анализатора становилось только сложнее), анализатор (HTML, java, сниффер действий).
Цель — научить авторизатор работать, и он заработал с первого раза, но сайт, который я выбрал, имеет 3 сценария авторизации, из-за которых агент не может сообразить, как их совместить, как определить, на каком этапе или сценарии он находится).
Вчера почти успел в одном чате научить его всем сценариям авторизации, но пришел: The generated has been interrupted for some reason, и всё сломал, вообще вчера пришлось создать где-то 20-30 чатов, такая задача оказалась сложной...
Сегодня проект авторизатора разросся на столько, что новый чат словил: The generated has been interrupted for some reason, и сразу за новым чатом пришлось создавать новый.
