Google поддержит общий запрет обучения ИИ

Google объявила о планах поддержать общий механизм управления обучением искусственного интеллекта в файле robots.txt. Он позволит сайтам одним действием сообщать о своих предпочтениях сразу нескольким разработчикам нейросетей. Механизм основан на работе группы AIPREF в Инженерном совете интернета и дополняет инструмент Google-Extended, который компания предлагает с 2023 года.

Вместо того чтобы прописывать отдельные инструкции для каждого разработчика, владельцы сайтов смогут использовать в robots.txt общий маркер политики. С его помощью можно задать единые предпочтения для всех участвующих компаний. Если сайт с помощью маркера откажется от обучения, а Google-Extended отдельно не указан, Google будет считать это запретом для Google-Extended.

Другие разработчики нейросетей смогут обрабатывать сигнал аналогичным образом. Владельцы сайтов получат возможность отказаться от обучения сразу у всех компаний или выбрать отдельные из них. Существующие индивидуальные настройки продолжат работать вместе с новым сигналом. Сайты, которые явно разрешают Google-Extended, могут появляться в ответах приложений Gemini и получать переходы.

Предложение учитывает отзывы издателей, общественных организаций и регуляторов, которые призывали ввести общие правила для обучения нейросетей. Кроме того, оно согласуется с европейским кодексом практик для поставщиков моделей общего назначения. Ранее Google обновил документацию по тегу robots, уточнив правила его работы и размещения в коде страниц.

Google планирует внедрить новый механизм вместе с другими разработчиками нейросетей в 2027 году и будет сообщать о ходе работ. Пока обсуждение остальных положений словаря AIPREF продолжается, владельцы ресурсов получают ранний доступ к единому сигналу. Специалистам по продвижению сайтов и созданию сайтов стоит заранее проверить настройки robots.txt своих проектов.