Российским провайдерам рекомендовали ограничить активность ботов Google

В конце апреля зарегистрированные в реестре провайдеры хостинга получили письмо с рекомендациями касательно настройки ограничений доступа ботов к данным на российских веб-ресурсах. По данным «Коммерсанта», в документе упоминаются иностранные боты GPTBot, Googlebot и пр. Они используются Google, OpenAI, Apple и другими компаниями для индексации сайтов, обучения генеративных моделей и интернет-рекламы.

Необходимость ограничения доступа ботов к данным в письме объясняется защитой сайтов от сбора информации об имеющихся уязвимостях, а также стремлением воспрепятствовать индексированию данных российских граждан с целью последующего анализа.

Провайдерам рекомендовали проанализировать потенциальные риски. При обнаружении возможных угроз они должны заблокировать поисковых ботов в соответствии с действующими правилами блокировки. В документе приведены идентификаторы для выявления вредоносных ботов.

Представитель DDoS-Guard факт получения письма подтвердил. В РКН общаться на эту тему с журналистами «Коммерсанта» отказались.