Как избежать ошибки CSRF при парсинге и исправить её
Что такое токен CSRF? Почему он появляется при веб-парсинге? Мы объясним, что такое ошибка CSRF и как ее избежать при создании скриптов для сбора...
Команда Froxy17 дек 20255 мин
Парсинг
Кеширование в Python при скрапинге: сокращение количества запросов и ускорение сбора данных
Механизмы кэширования Python и методы сохранения состояния сейчас играют главную роль. В этом гайде — как использовать кэширование в Python для...
Команда Froxy9 дек 202510 мин
Парсинг
Скрапинг сложных JavaScript-сайтов без API: хитрости работы с динамическим контентом
Узнайте, как собирать данные с JavaScript-сайтов, когда нет API. Приемы и инструменты для скрапинга и работы с динамическим контентом через Python.
Команда Froxy13 ноя 20258 мин
Парсинг
Как обойти защиту Cloudflare от ботов: вариант веб-скрапинга с Puppeteer
Как настроить Puppeteer для обхода Cloudflare: прокси-серверы, управление сессиями и обработка CAPTCHA. В статье практические советы и напоминание об...
Команда Froxy30 окт 202510 мин
Парсинг
Как предотвратить остановку парсера на Python из-за обновлений сайта
Даже малейшие изменения HTML ломают парсеры. В статье практические приёмы, которые помогут сделать ваш Python-код для скрапинга стабильным и надёжным.
Команда Froxy16 окт 202511 мин
Парсинг
Скрапинг на “светлой стороне”: robots.txt, TOS и законы
Как быть собирать данные и оставаться этичным? Этичный веб-скрапинг – это про уважение robots.txt и пользовательских соглашений. Просто следуйте этим...
Команда Froxy2 окт 20257 мин
Парсинг
Веб-скрапинг на Python или Golang? Выбираем язык под задачи
Сравниваем Go и Python по скорости выполнения скриптов, асинхронности, удобству написания кода и сопровождения и другим критериям. В конце чеклист...
Команда Froxy18 сен 20257 мин
Парсинг
Будущее веб-скрапинга: ИИ-боты, Captcha v4 и эволюция антискрапинговых мер
Узнайте, как ИИ меняет веб-скрапинг, что нового в Captcha v4 и какие антибот-меры влияют на автоматизированный сбор данных. Как подстроится под новые...
Команда Froxy4 сен 20256 мин
Парсинг
Сбор данных без хаоса: системный workflow для парсинга
Узнайте, какие инструменты для сбора данных выбрать и как построить системный workflow для парсинга. Практические советы для быстрых и масштабируемых...
Команда Froxy21 авг 20259 мин
Парсинг
LangChain vs. LangGraph для скрапинга. Какой фреймворк лучше?
Сравниваем LangChain и LangGraph в задачах веб-скрапинга: как они работают с прокси серверами, управляют ретраями и строят сложные пайплайны сбора...
