Вход в Skraper
Введите API-ключ, чтобы пользоваться интерфейсом.
Войти
Новая задача
● …
🔑 выйти
Режим
spider — обойти весь сайт
list — проверить список URL
URL сайта
Список URL (по одному в строке)
Проект (домен)
— создать по домену —
Потоков
Задержка мс
Уважать robots.txt
↳ игнорировать Crawl-delay
Макс. страниц
Макс. глубина
Исключить URL (regex, через запятую)
Только эти URL (regex, через запятую)
Дополнительные функции
Собирать картинки (не только HTML)
Проверять внешние ссылки
Выявлять шаблоны страниц
Считать PageRank (внутр. вес)
Определять CMS / технологии
W3C-валидация HTML
выкл
по шаблонам (рекомендуется)
все страницы
выборка (1 из 5)
PageSpeed (PSI / CWV)
выкл
по шаблонам (рекомендуется)
все страницы
выборка (1 из 5)
Контент в Markdown (для AI)
выкл
по шаблонам (рекомендуется)
все страницы
выборка (1 из 5)
JS-рендеринг (для SPA)
выкл
авто (только SPA-страницы)
все страницы через браузер
Кастомные столбцы (свой парсинг)
🧩 Кастомные столбцы
Запустить краулинг
Задачи
← Выбери задачу или запусти новую
—
🌐 Граф
✕
🌐
Дерево ссылок
Дерево иерархии
Граф связей
⤢ Вписать
✕ Закрыть
🔀 Сравнение сканов
✕
Базовый скан (было)
Новый скан (стало)
Выбери два скана одного проекта…
учитывать переезды (редиректы)
История сравнений проекта
—
Сверить
🔀
Сравнение
⬇ Экспорт
✕ Закрыть
…