iFixAi CLI
iFixAi проверяет поведение ИИ-агента в модельных ситуациях, оценивает ответы и сохраняет доказательства ошибок в отчете.
- 45 036 ★ репозитория
- Последний коммит
- Apache-2.0
Расширенный доступ
Почему такой уровень
- При подключении настоящего агента тесты отправляют ему запросы и могут вызвать разрешенные ему действия.
Установка
- Работает в
В терминале, через SkillFoxx CLI
npx skillfoxx add cli/ifixaiОпределит агенты на машине, покажет уровень доступа и зафиксирует версию.
Другие способы установки
Доступ и проверки
Как мы проверяемРасширенный доступИнструмент запускает код или ходит в сеть, а внешние данные только читает.
- При подключении настоящего агента тесты отправляют ему запросы и могут вызвать разрешенные ему действия.
Это чужой код. Посмотрите файлы в репозитории перед установкой.
Что делает
iFixAi запускает проверки поведения агента по описанию его роли и правил организации. Утилита создает модель рабочей среды, отправляет агенту обычные и провокационные запросы, а отдельная модель оценивает ответы. В отчете видны запрос, реакция агента и основание вывода. Для знакомства есть демонстрационный режим без ключей с заранее подготовленными ответами и оценками. Собственного агента подключают через совместимый с OpenAI адрес чата или адаптер. Плагины для Claude Code и Codex помогают подготовить описание среды, показать план расходов и разобрать результат.
Для кого. Командам, которые выпускают ИИ-агента с бизнес-правилами и хотят проверить его полномочия до подключения к реальным операциям.
Подходит, если
- Перед выпуском нужно проверить, соблюдает ли агент границы своей роли.
- После изменения инструкций требуется повторить одинаковые проверки в CI.
- При ошибке нужен отчет с исходным запросом и ответом агента.
- Бизнес-сценарии надо описать и проверить до платного запуска.
Не подходит, если
- Демонстрационный балл собираются выдать за аудит собственного агента.
- Тестовый адрес подключен к реальным действиям без изоляции.
- Результат модельного судьи должен заменить обязательную ручную экспертизу.
Пример запроса к агенту
Подготовь среду проверки нашего агента поддержки, проверь описание и покажи план запуска без платных обращений.Ограничения
Нужен Python 3.10 или новее; для реального запуска отдельно устанавливается поддержка выбранного провайдера судьи. Утилита отправляет тестовые запросы настоящему агенту, поэтому используйте его стендовую копию с отдельными доступами. Ключи, расходы и доступность моделей зависят от подключенных провайдеров; сначала просмотрите план через `--dry-run`. Оценка отражает проверенные сценарии и качество описания среды, поэтому непроверенные бизнес-правила требуют дополнительных тестов.
Как отключить. Остановите запуск и отключите плагин или скилл в клиенте. Проверьте каталог `ifixai-results` перед удалением: он хранит материалы аудита.
Частые вопросы
Можно ли попробовать без ключа?
Да. Демонстрация использует готовые ответы и оценки. После нее отдельно настройте своего агента.
Куда сохраняется отчет?
В `./ifixai-results/`, в JSON и Markdown. Откройте доказательства по каждому проваленному тесту.
Как проверить план без расходов?
Добавьте `--dry-run`. Утилита покажет количество тестов и обращений к судье, затем остановится.
Кто оценивает ответы?
Отдельная модель другого провайдера. Проверьте ее выбор и ключи перед запуском.
Есть ли подключение к Codex?
Да. В README есть команды установки плагина Codex; после установки откройте новую сессию.
Обсуждение
Вопросов и отзывов пока нет.
Похожие
CLI-инструментыМногоагентная обвязка с проверкой результата по артефактам: стоп-хуки, независимый судья и журнал событий для Claude Code, Codex, Cursor и других
Общая основа для Claude Code, Codex, Antigravity CLI и OpenCode: жизненный цикл задачи, навыки и песочницы.
Навык и утилита ai-collab для совместной работы Codex CLI, Claude Code и API-моделей над проектом, плюс чтение файлов в ChatGPT
Плагин с одним скиллом по проектированию, отладке и оценке ИИ-агентов, основанный на книге Bojie Li об инженерии агентов.
Открытый кодовый агент для терминала, браузера и десктопа, который работает с моделями от OpenAI и Claude до Ollama
AI Builder Club Skills
AI Builder Club — Skills
Плагин-маркетплейс для Claude Code: сделать репозиторий готовым к работе агента и запускать самоподдерживающиеся циклы
Коротко о README
Набор по умолчанию проверяет права роли, следование заданию и реакцию на внедренные инструкции. Полный набор включается отдельным флагом.