fastCRW MCP

Установка

Работает в

• Claude Code
• Cursor
• Codex
• Gemini CLI
• Windsurf
• OpenCode
• SourceCraft
• Koda
• Coddy

Ручная установка

npx -y crw-mcp@latest install

Что делает

fastCRW — один бинарник на Rust с движком для работы с веб-страницами. Он берет адрес и возвращает Markdown, HTML, список ссылок, изображения или JSON по вашей схеме. Простые страницы забирает обычный запрос, а для тех, что строятся скриптами, движок подключает встроенный облегченный браузер или Chrome. Команда `npx -y crw-mcp@latest install` добавляет MCP-сервер `crw` и набор скиллов в найденные у вас агенты; без ключа сервер работает локально, во встроенном режиме. MCP-сервер отдает агенту инструменты `crw_scrape`, `crw_crawl` с опросом готовности через `crw_check_crawl_status`, `crw_map`, `crw_search`, `crw_extract` и `crw_parse_file`. Карта сайта собирает адреса из sitemap и ссылок без загрузки содержимого. Обход идет вширь от стартового адреса и по умолчанию соблюдает `robots.txt`. `crw_parse_file` превращает PDF из base64 в Markdown. Ответ по умолчанию обрезается до 15 000 знаков, чтобы не забивать контекст агента, и снимается параметром `maxLength: 0`. В репозитории лежат тринадцать скиллов с общей лестницей действий: сначала поиск, затем скрейпинг одной страницы, карта, обход, разбор PDF, извлечение по схеме и слежение за изменениями. Отдельные скиллы описывают переезд с Firecrawl заменой базового адреса и установку собственного сервера в Docker. Те же операции доступны из командной строки `crw`, из SDK для Python и Node.js и по REST. Для облака нужен ключ с fastcrw.com, а локальный режим бесплатен.

Для кого. Для разработчиков и аналитиков, чьи агенты в Claude Code, Cursor или Codex читают сайты, документацию и поисковую выдачу, и для тех, кто хочет держать сборщик страниц на своем сервере.

Пример запроса к агенту

Собери документацию с docs.example.com в Markdown: сначала покажи, сколько там страниц, потом забери первые пятьдесят

MCP

Транспорт

stdio

Авторизация

не нужна

Ограничения

• Лицензия AGPL-3.0 у движка и MCP-сервера, у SDK для Python и TypeScript MIT. Для встраивания в закрытый продукт автор предлагает писать ему на почту.
• Облачный режим платный по кредитам: новому аккаунту дают 1000 бесплатных кредитов один раз, не ежемесячно. Ключ можно записать в `~/.config/crw/config.toml`, он не копируется в настройки каждого агента.
• Извлечение `crw_extract` и форматы `json` и `summary` в `crw_parse_file` требуют подключенной языковой модели: свой ключ провайдера или модель на сервере.
• Чтобы не вносить правки в настройки агентов, добавьте переменную `CRW_NO_AGENTS=1`; без нее установщик с ключом сам регистрирует сервер в Claude Code, Cursor, Codex, Gemini CLI, OpenCode и Windsurf.
• Доступность возможностей зависит от развертывания: список отдает адрес `/v1/capabilities`. Обход и карта соблюдают `robots.txt`, а за уважение к правилам сайтов отвечает пользователь.

Как отключить. Удалите запись `crw` из конфигурации MCP вашего агента и папки скиллов `crw*` из каталога скиллов. Бинарник `crw`, который положил установочный скрипт, лежит в `/usr/local/bin` или в папке из `CRW_INSTALL_DIR`, его достаточно удалить. Ключ и настройки хранятся в `~/.config/crw/config.toml`.

Коротко о README

В репозитории лежат исходники движка по отдельным пакетам Rust (сервер, CLI, MCP, поиск, отрисовка, сравнение страниц), SDK для Python, тринадцать скиллов, манифесты плагинов для Claude Code, Codex и Cursor, замеры скорости с описанием методики и статьи блога. Главная страница начинается с установки одной командой и таблицы операций, затем идут выбор между облаком и своим сервером и ссылки на документацию.