Scrapling MCP Server

Scrapling MCP Server

D4Vinciv0.5.1BSD-3-Clause
104.8k звёзд10.9k форков
Scrapling MCP Server — инструмент для веб-скрапинга, который автоматически обходит Cloudflare, Cloudfront и другие системы защиты. Если сайт использует JavaScript для рендеринга контента, сервер подключает реальный браузер. Данные можно извлекать по CSS-селекторам или XPath — всё это доступно через запросы к AI-ассистенту. Сервер создан для разработчиков и дата-сайентистов, которым нужно парсить защищённые сайты без ручной настройки обхода. Scrapling берёт на себя подмену отпечатков браузера, управление сессиями и выполнение JS.
  • Сервер сообщества
  • Локальный запуск (stdio)
  • Python
  • Лицензия BSD-3-Clause
  • Обновлён 17 ноября 2026 г.
Подключение

Подключить Scrapling MCP Server

Выберите способ запуска и свой MCP-клиент. Ниже останется одна готовая инструкция, которую можно проверить и скопировать.

1

Способ подключения

2

Куда подключить

3

Скопируйте и проверьте

Claude Desktop / Claude Code

Локальный MCP-сервер запускается этой командой из конфигурации выбранного клиента.

  1. 1.Откройте настройки MCP в Claude.
  2. 2.Добавьте сервер с указанной командой и переменными окружения.
  3. 3.Перезапустите Claude, если сервер не появился автоматически.
json
{
  "mcpServers": {
    "scrapling": {
      "command": "uvx",
      "args": [
        "scrapling"
      ]
    }
  }
}

Перед подключением сверьте команду с README проекта, замените шаблонные токены и предоставьте только необходимые права доступа.

Характеристики

Общее

  • СтатусСообщество
  • РазработчикD4Vinci
  • Версияv0.5.1
  • ЛицензияBSD-3-Clause
  • Последний релиз04.11.2026
  • Активность источника17.11.2026

Технологии

  • Языки
    Python
  • Транспорт
    stdio — локальный запуск

Описание

Возможности

  • Автоматический обход Cloudflare, Cloudfront и других WAF без необходимости вручную настраивать куки или заголовки.
  • Рендеринг JavaScript в реальном браузере на базе Playwright — для страниц с асинхронной загрузкой контента.
  • Извлечение данных по CSS-селекторам и XPath: гибкие запросы к DOM, поддержка атрибутов и вложенных селекторов.
  • Подмена цифровых отпечатков браузера (TLS, HTTP-заголовки, User-Agent) для имитации реального пользователя.
  • Управление сессиями и куками: автоматическое сохранение состояния между запросами.
  • Поддержка прокси-серверов HTTP, HTTPS, SOCKS4, SOCKS5 с аутентификацией.
  • Асинхронная обработка запросов — сервер работает параллельно, не блокируя ассистента.
  • Структурированный вывод: результат в виде текста, HTML-кода или значений атрибутов (href, src, data-*).
  • Интеграция с AI-агентами: готовый скилл для OpenClaw и документация для других платформ.

Как подключить

1. Установите сервер через UVX (менеджер пакетов uv):

uvx scrapling

2. Настройте MCP-клиент. Для Claude Desktop отредактируйте файл claude_desktop_config.json:

{ "mcpServers": { "scrapling": { "command": "uvx", "args": ["scrapling"] } } }

3. Перезапустите клиент. Инструменты сервера станут доступны в интерфейсе ассистента.

Примеры запросов

  • «Собери заголовки статей с сайта, защищённого Cloudflare. Используй CSS-селектор h2.article-title.»
  • «Открой страницу интернет-магазина с динамической подгрузкой товаров, извлеки названия, цены и ссылки. Включи браузерный рендеринг.»
  • «Сравни описание продукта на статичной версии страницы и после выполнения JavaScript. Верни оба варианта текста.»
  • «Найди все изображения на странице, верни их src. Пропусти изображения, заблокированные защитой.»

Технические детали

  • Язык: Python
  • Транспорт: stdio
  • Лицензия: BSD-3-Clause
  • Совместимость: Claude Desktop, VS Code, Cursor, Continue.dev и любые MCP-клиенты
  • Для работы требуется браузерный движок Playwright (устанавливается автоматически)

Поделиться