Скиллы LangSmith
LangSmith Skills
Официальные скиллы LangChain для LangSmith: запрос и выгрузка трейсов, датасеты для оценки и собственные эвалюаторы прямо из агента
- 163 ★ репозитория
- Последний коммит
- MIT
Расширенный доступ
Почему такой уровень
- Запускает вспомогательные скрипты и CLI
- Читает трейсы, где могут быть данные пользователей
Установка
- Работает в
В терминале, через SkillFoxx CLI
npx skillfoxx add skills/langsmith-skillsОпределит агенты на машине, покажет уровень доступа и зафиксирует версию.
Другие способы установки
Доступ и проверки
Как мы проверяемРасширенный доступИнструмент запускает код или ходит в сеть, а внешние данные только читает.
- Запускает вспомогательные скрипты и CLI
- Читает трейсы, где могут быть данные пользователей
Это чужой код. Посмотрите файлы в репозитории перед установкой.
Что делает
Три скилла помогают наблюдать за LLM-приложениями и оценивать их. langsmith-trace добавляет трассировку в код и выгружает трейсы для отладки через langsmith CLI. langsmith-dataset собирает из трейсов датасеты для оценки. langsmith-evaluator создает собственные эвалюаторы. В каждый скилл входят вспомогательные скрипты на Python и TypeScript.
Для кого. Для разработчиков LLM-приложений и агентов, которые используют LangSmith.
Подходит, если
- Нужно разобраться, почему агент в продакшене ответил неверно, по его трейсам
- Нужно собрать датасет для регрессионной оценки
- Нужно написать эвалюатор под свою метрику качества
Не подходит, если
- Трассировка ведется в другой системе наблюдаемости
- Нужны скиллы для разработки на LangChain или LangGraph: для этого есть langchain-skills
Пример запроса к агенту
Выгрузи трейсы с ошибками за вчера из проекта support-bot и сделай из них датасетОграничения
Проект в ранней разработке, содержимое может меняться. Нужен ключ LangSmith, а для моделей ключи OpenAI или Anthropic, которые из России без VPN не работают. Скилл трейсов требует установки langsmith CLI.
Как отключить. Удалите плагин langsmith-skills через /plugin или папки скиллов из каталога агента.
Частые вопросы
С какими агентами работает?
С любыми, которые поддерживает skills.sh, включая Claude Code, Cursor, Windsurf и Goose. Для Claude Code есть плагин.
Как поставить глобально?
Добавьте флаг --global к команде npx skills add.
Обсуждение
Вопросов и отзывов пока нет.
Похожие
СкиллыОфициальные скиллы LangChain: выбор между LangChain, LangGraph и Deep Agents, квикстарты, RAG, память, согласование с человеком и разработка оценок
Скилл с руководством по LangGraph 1.0: ReAct-агенты, StateGraph, middleware, память, MCP и RAG, чтобы Claude Code писал код на LangChain без устаревших API
CLI и Python SDK для поиска, установки, создания и оценки переиспользуемых скиллов агентов из общей библиотеки
Скилл для создания, проверки и улучшения других скиллов: сначала архитектура, потом тесты, оценка и упаковка
CLI-менеджер скиллов для ИИ-агентов: установка из репозиториев, перевод между форматами разных агентов и раскладка в их конфигурацию
Скилл, который дает зрение текстовым моделям: изображение по пути или из вставки превращается в структурированный JSON с распознанным текстом, разметкой и смысл
Коротко о README
README предупреждает о ранней стадии проекта и указывает, что для разработки агентов есть отдельный репозиторий langchain-skills. Описаны три способа установки: skills.sh локально или глобально, плагин Claude Code и скрипт install.sh для Claude Code и Deep Agents CLI. Дальше переменные окружения и список трех скиллов.
Бейдж для README
Исходный SKILL.md
--- name: langsmith-trace description: "INVOKE THIS SKILL when working with LangSmith tracing OR querying traces. Covers adding tracing to applications and querying/exporting trace data. Uses the langsmith CLI tool." --- <oneliner> Two main topics: **adding tracing** to your application, and **querying traces** for debugging and analysis. Python and Javascript implementations are both supported. </oneliner> <setup> Environment Variables ```bash LANGSMITH_API_KEY=lsv2_pt_your_api_key_here # REQUIRED LANGSMITH_PROJECT=your-project-name # Optional: default project LANGSMITH_WORKSPACE_ID=your-workspace-id # Optional: for org-scoped keys ``` Authentication is REQUIRED: either set the `LANGSMITH_API_KEY` environment variable, or pass the `--api-key` flag to CLI commands (preferred): ```bash langsmith trace list --project my-project --api-key $LANGSMITH_API_KEY ``` **IMPORTANT:** Always check the environment variables or `.env` file for `LANGSMITH_PROJECT` before querying or interacting with LangSmith. This tells you which project contains the relevant traces and data. If the LangSmith project is not available, use your best judgement to identify the right one. CLI Tool ```bash curl -sSL https://raw.githubusercontent.com/langchain-ai/langsmith-cli/main/scripts/install.sh | sh ``` </setup> <trace_langchain_oss>