Скиллы LangSmith

LangSmith Skills

Официальные скиллы LangChain для LangSmith: запрос и выгрузка трейсов, датасеты для оценки и собственные эвалюаторы прямо из агента

  • 163 ★ репозитория
  • Последний коммит
  • MIT
Скилл

Расширенный доступ

Почему такой уровень

  • Запускает вспомогательные скрипты и CLI
  • Читает трейсы, где могут быть данные пользователей
Все причины и проверки

langchain-ai/langsmith-skills

Установка

В терминале, через SkillFoxx CLI

npx skillfoxx add skills/langsmith-skills

Определит агенты на машине, покажет уровень доступа и зафиксирует версию.

Другие способы установки

Доступ и проверки

Как мы проверяем

Расширенный доступИнструмент запускает код или ходит в сеть, а внешние данные только читает.

  • Запускает вспомогательные скрипты и CLI
  • Читает трейсы, где могут быть данные пользователей

Это чужой код. Посмотрите файлы в репозитории перед установкой.

Что делает

Три скилла помогают наблюдать за LLM-приложениями и оценивать их. langsmith-trace добавляет трассировку в код и выгружает трейсы для отладки через langsmith CLI. langsmith-dataset собирает из трейсов датасеты для оценки. langsmith-evaluator создает собственные эвалюаторы. В каждый скилл входят вспомогательные скрипты на Python и TypeScript.

Для кого. Для разработчиков LLM-приложений и агентов, которые используют LangSmith.

Подходит, если

  • Нужно разобраться, почему агент в продакшене ответил неверно, по его трейсам
  • Нужно собрать датасет для регрессионной оценки
  • Нужно написать эвалюатор под свою метрику качества

Не подходит, если

  • Трассировка ведется в другой системе наблюдаемости
  • Нужны скиллы для разработки на LangChain или LangGraph: для этого есть langchain-skills

Пример запроса к агенту

Выгрузи трейсы с ошибками за вчера из проекта support-bot и сделай из них датасет

Ограничения

Проект в ранней разработке, содержимое может меняться. Нужен ключ LangSmith, а для моделей ключи OpenAI или Anthropic, которые из России без VPN не работают. Скилл трейсов требует установки langsmith CLI.

Как отключить. Удалите плагин langsmith-skills через /plugin или папки скиллов из каталога агента.

Частые вопросы

С какими агентами работает?

С любыми, которые поддерживает skills.sh, включая Claude Code, Cursor, Windsurf и Goose. Для Claude Code есть плагин.

Как поставить глобально?

Добавьте флаг --global к команде npx skills add.

Обсуждение

Вопросов и отзывов пока нет.

Скиллы
Официальный

Официальные скиллы LangChain: выбор между LangChain, LangGraph и Deep Agents, квикстарты, RAG, память, согласование с человеком и разработка оценок

СкиллМинимальный доступ1,3 тыс.Звезды репозитория

Скилл с руководством по LangGraph 1.0: ReAct-агенты, StateGraph, middleware, память, MCP и RAG, чтобы Claude Code писал код на LangChain без устаревших API

СкиллМинимальный доступ465Звезды репозитория

CLI и Python SDK для поиска, установки, создания и оценки переиспользуемых скиллов агентов из общей библиотеки

CLIРасширенный доступ1,4 тыс.Звезды репозитория

Скилл для создания, проверки и улучшения других скиллов: сначала архитектура, потом тесты, оценка и упаковка

СкиллРасширенный доступ201Звезды репозитория

CLI-менеджер скиллов для ИИ-агентов: установка из репозиториев, перевод между форматами разных агентов и раскладка в их конфигурацию

CLIРасширенный доступ1,6 тыс.Звезды репозитория

Скилл, который дает зрение текстовым моделям: изображение по пути или из вставки превращается в структурированный JSON с распознанным текстом, разметкой и смысл

СкиллРасширенный доступ4,7 тыс.Звезды репозитория

Коротко о README

README предупреждает о ранней стадии проекта и указывает, что для разработки агентов есть отдельный репозиторий langchain-skills. Описаны три способа установки: skills.sh локально или глобально, плагин Claude Code и скрипт install.sh для Claude Code и Deep Agents CLI. Дальше переменные окружения и список трех скиллов.

Бейдж для README

Исходный SKILL.md

---
name: langsmith-trace
description: "INVOKE THIS SKILL when working with LangSmith tracing OR querying traces. Covers adding tracing to applications and querying/exporting trace data. Uses the langsmith CLI tool."
---

<oneliner>
Two main topics: **adding tracing** to your application, and **querying traces** for debugging and analysis. Python and Javascript implementations are both supported.
</oneliner>

<setup>
Environment Variables

```bash
LANGSMITH_API_KEY=lsv2_pt_your_api_key_here          # REQUIRED
LANGSMITH_PROJECT=your-project-name                   # Optional: default project
LANGSMITH_WORKSPACE_ID=your-workspace-id              # Optional: for org-scoped keys
```

Authentication is REQUIRED: either set the `LANGSMITH_API_KEY` environment variable, or pass the `--api-key` flag to CLI commands (preferred):
```bash
langsmith trace list --project my-project --api-key $LANGSMITH_API_KEY
```

**IMPORTANT:** Always check the environment variables or `.env` file for `LANGSMITH_PROJECT` before querying or interacting with LangSmith. This tells you which project contains the relevant traces and data. If the LangSmith project is not available, use your best judgement to identify the right one.

CLI Tool
```bash
curl -sSL https://raw.githubusercontent.com/langchain-ai/langsmith-cli/main/scripts/install.sh | sh
```
</setup>

<trace_langchain_oss>

Сообщить о проблеме

Foxx AIСкиллы LangSmith
Foxx AI

Я Foxx AI и уже разобрал этот инструмент. Спросите про установку, настройку или что угодно еще, отвечу простыми словами.