Новости
Восстановили парсинг Google: обходим JavaScript защиту
21.01.2025Уважаемые пользователи! Рады сообщить, что на данный момент мы практически полностью восстановили работу наших инструментов для парсинга ПС Google, несмотря на серьезные изменения, внедренные Google 15 января, приведшие к временным перебоям в работе сервиса.
Что сейчас работает:
Парсинг Google поиска (десктоп): доступен XML, JSON и HTML. Обратите внимание: в теге found priority="all" для XML и JSON формата теперь отображается количество документов на текущей странице, а блоки «Вопросы по теме», «Запросы по теме» и «Другие также ищут» временно не выводятся. В HTML формате эти данные присутствуют.
Обновление: для корректного определения количества проиндексированных страниц сайта в теге found priority="all", необходимо сделать запрос &query=site:domain.com
Парсинг мобильной выдачи Google: функционирует полностью, поддерживаются форматы XML, JSON и HTML.
Парсинг Google Картинок: полностью восстановлен, доступны XML, JSON и HTML.
Парсинг Google Новостей: полностью восстановлен, доступны XML, JSON и HTML.
Парсинг Google Видео: полностью восстановлен, доступны XML, JSON и HTML.
Важное замечание
Из-за новых требований Google к протоколам взаимодействия мы временно ограничили скорость совершения запросов до 15 запросов в секунду на одного пользователя, этого вполне достаточно для большинства сценариев использования. Мы активно работаем над оптимизацией системы и устранением оставшихся ограничений.
Изменения Google включают новые меры защиты, использование JavaScript и пересмотренные требования к обработке сессий, что усложняет обработку данных, но мы готовы адаптироваться и развивать наши инструменты для предоставления надежных решений.
Если вы нашли какие то ошибки в работе инструмента пишите в поддержку чтобы мы могли оперативно исправить!