ChainForge — промпт
Визуальная среда для проверки промптов: граф сравнивает ответы нескольких моделей на вариации промпта и настроек, с оценщиками и 188 примерами потоков
- 3 034 ★ репозитория
- Последний коммит
- MIT
Расширенный доступ
Почему такой уровень
- Может выполнять код на Python на вашей машине
- Запросы к нескольким моделям расходуют баланс ключей
Установка
В терминале, через SkillFoxx CLI
npx skillfoxx add prompts/chainforgeОпределит агенты на машине, покажет уровень доступа и зафиксирует версию.
Другие способы установки
Доступ и проверки
Как мы проверяемРасширенный доступИнструмент запускает код или ходит в сеть, а внешние данные только читает.
- Может выполнять код на Python на вашей машине
- Запросы к нескольким моделям расходуют баланс ключей
Это чужой код. Посмотрите файлы в репозитории перед установкой.
Что делает
ChainForge — приложение с браузерным интерфейсом, где потоки собирают в виде графа. Оно запрашивает несколько моделей одновременно, сравнивает ответы по вариациям промпта, моделям и настройкам и оценивает результат метриками: оценщиками на Python или моделью. В комплекте 188 примеров потоков, а при желании подключается RAG (`pip install chainforge[rag]`). Запуск: `pip install chainforge`, затем `chainforge serve` и адрес localhost:8000 в Chrome, Firefox, Edge или Brave. Нужны ключи провайдеров моделей.
Для кого. Для промпт-инженеров и исследователей, которым нужно сравнить формулировки промптов и модели на одних и тех же входах, а не гадать по одному ответу.
Подходит, если
- Нужно сравнить несколько вариантов промпта на нескольких моделях одной таблицей
- Нужны метрики, чтобы оценить ответы автоматически
- Нужен учебный набор готовых потоков, чтобы начать
Не подходит, если
- Нужен плагин или скилл для агента: ChainForge отдельное приложение с браузерным интерфейсом
- Нельзя запускать на машине код оценщиков на Python
Пример запроса к агенту
Собери поток с тремя вариантами промпта для краткого пересказа и сравни ответы двух моделей по длине и точностиОграничения
ChainForge отдельное приложение, не плагин агента. По README оно может выполнять код на Python на вашей машине, поэтому сервер принимает запросы только со своей страницы. Нужны ключи провайдеров моделей, а запросы к нескольким моделям сразу расходуют их баланс. Запуск командой `chainforge serve`, интерфейс на localhost:8000 в Chrome, Firefox, Edge или Brave. Версия 0.3.7 от 16.09.2026.
Как отключить. Остановите сервер (Ctrl+C), удалите пакет командой pip uninstall chainforge и отзовите ключи провайдеров, которые вводили.
Частые вопросы
Что такое ChainForge?
Среда с графическим интерфейсом для проверки промптов: сравнивает ответы нескольких моделей на вариации промпта и настроек.
Это плагин для агента?
Нет, это отдельное приложение. Оно запускается командой chainforge serve и открывается в браузере.
Что нужно для запуска?
pip install chainforge, ключи провайдеров моделей и браузер Chrome, Firefox, Edge или Brave.
Выполняет ли оно код?
По README ChainForge может выполнять код на Python на вашей машине, поэтому сервер принимает запросы только со своей страницы.
Обсуждение
Вопросов и отзывов пока нет.
Похожие
ПромптыПлагин Claude Code, который задает один вопрос сразу нескольким моделям и показывает их ответы рядом с разбором согласий и расхождений
Открытая библиотека промптов с плагином Claude Code, MCP-сервером и CLI: поиск, получение и улучшение промптов и скиллов из агента
Система структурных промптов: шаблоны с ролью, профилем, навыками, правилами и сценарием для повторяемых запросов к моделям
Скилл пишет точные промпты под конкретный инструмент: Cursor, Claude Code, Midjourney, Stable Diffusion и другие
MCP-сервер и веб-инструмент для улучшения промптов: три инструмента оптимизации системных и пользовательских промптов с итеративной доработкой
CLI и MCP-сервер, которые превращают сайты документации, репозитории, PDF и видео в скиллы и данные для RAG
Коротко о README
README описывает ChainForge как визуальную среду для проверки промптов: граф потоков, сравнение моделей, метрики, 188 примеров потоков, RAG и запуск командой chainforge serve. Лицензия MIT.