Google прячет прямые ссылки в выдаче за редиректом /goto

· Технологии
Google Поиск перестал показывать в HTML прямые адреса найденных страниц, подменяя их непрозрачными ссылками вида google.com/goto. Так компания усложняет массовый сбор данных из выдачи.

cover.svg

Google Поиск начал переписывать ссылки в органической выдаче: вместо реального адреса страницы в HTML теперь стоит ссылка формата google.com/goto?url=.... При клике браузер проходит через Google и уже оттуда попадает на нужный сайт.

Чем это отличается от прежней схемы

Google и раньше оборачивал ссылки в редиректы, но старый формат google.com/url?q=... содержал адрес назначения в читаемом виде — его можно было просто извлечь из строки запроса. Новый /goto устроен иначе: параметр url= закодирован по собственной схеме Google, это не обычный base64, и расшифровать его "офлайн" нельзя. По сути это непрозрачная отсылка к записи в индексе Google. Настоящий адрес приходит только в заголовке Location при обращении к /goto.

По данным сервиса Autom, впервые опубликовавшего наблюдение, единичные goto-ссылки замечали и раньше, но с конца августа 2026 года схема стабильно работает для незалогиненных пользователей и режима инкогнито — в этих условиях практически все ссылки в выдаче ведут через редирект. Не исключено, что это всё ещё эксперимент, однако он давно вышел за пределы небольшой доли запросов.

Зачем это Google

Автор материала связывает изменение с общей борьбой Google против автоматического сбора выдачи — прежде всего со стороны ИИ-краулеров и SEO-скраперов, которые массово выкачивают адреса результатов, чтобы строить собственные индексы. Раньше парсер мог вытащить тысячи ссылок прямо из HTML, ни разу больше не обратившись к Google. Теперь ради каждого адреса нужен отдельный запрос обратно к поисковику: это медленнее, заметнее и даёт Google явный сигнал, когда один и тот же клиент подряд разрешает сотни ссылок.

Шаг вписывается в череду прежних мер: отключение параметра &num=100, ужесточение механизмов BotGuard и SearchGuard. Google методично повышает стоимость наивного скрапинга выдачи.

Оговорка об источнике

Стоит держать в уме, что материал написан компанией Autom, продающей API для сбора данных из поисковиков, и заканчивается рекламой её сервиса: авторы сообщают, что уже научились разбирать goto-ссылки и возвращать клиентам итоговые адреса без изменений в интеграции. Технические детали при этом выглядят достоверно, но общий тон — со стороны заинтересованной в скрапинге стороны. Любопытно и то, что destination-адрес всё равно остаётся где-то на странице: он нужен самому Google, чтобы нарисовать домен, фавикон и подпись результата.


Источник: Hacker News

Комментарии

Войдите, чтобы комментировать.

  • Пока нет комментариев.