Поздним вечером в пятницу *Meta внесла изменения в свою предстоящую политику, признав, что это было сделано в ответ на критику со стороны бизнес-клиентов и представителей СМИ.
«Мы вас услышали и хотим внести ясность: объединенные нами условия сканирования применялись только к нашим рекламным и бизнес-продуктам, и мы уточнили это в самих условиях», — говорится в пятничном заявлении для Mercury News.
Политика до внесения изменений ясно давала понять, что компании, использующие продукты *Meta, будут подчиняться режиму, в соответствии с которым *Meta может использовать данные веб-сайтов этих компаний практически для чего угодно, включая обучение ИИ. Новые условия (предварительный просмотр доступен здесь) как будто уменьшают ошеломляюще широкий охват, под который могли бы попасть данные компаний. Явное использование термина «обучение» больше не встречается в условиях, а новый документ делает акцент на «рекламных и бизнес-продуктах».
Но, как сообщает Mercury News, один из видных критиков новой политики, представитель News/Media Alliance Сэм Куигли, заявил о новой политике: «Похоже, что новый язык лишь ограничивает то, для чего *Meta может использовать контент издателей, но не их способность сканировать и получать контент в первую очередь».
Куигли добавил, по данным Mercury News: «Они могли убрать обучение из перечисленных вариантов использования, но поскольку это явно не исключено, это все еще потенциально возможно».
Куигли также отмечает, что в заявлении *Meta говорится об отсутствии изменений в использовании веб-краулеров, но компания явно не указывает это в новых условиях обслуживания.
Вопрос в том, будет ли *Meta полностью уважать пожелания, изложенные в файле robots.txt сайта — который лучше всего рассматривать как красный или зеленый свет для ботов веб-краулеров, уважаемый как правило дорожного движения в Интернете с незапамятных времен. Если *Meta действительно планирует уважать запросы robots.txt, то, как полагают, не должно быть проблемой сделать это явным в своих условиях обслуживания.
Неоднозначность возникает в чувствительное время для robots.txt, поскольку нормы, касающиеся старомодных веб-краулеров, становятся шаткими, поскольку компании, воодушевленные своими амбициями в области ИИ, похоже, хотят переопределить, что боту — в широком смысле — должно быть разрешено делать в Интернете.
В предварительном просмотре условий упоминается сбор данных с помощью «автоматизированного программного обеспечения (такого как веб-скрейперы, боты, роботы, пауки, краулеры и пользовательские агенты)». Видеть такую формулировку в то время, когда агенты становятся все более распространенными, может быть не очень обнадеживающим, даже если сама компания заявляет, что не меняет использование веб-краулеров, которые являются изобретением 90-х годов, используемым совместно с поисковыми системами.
Агенты имеют свои собственные отдельные правила, согласно Google, и Google говорит, что будет их уважать. Тем не менее, распространенное мнение, выраженное в Интернете, заключается в том, что по мере того, как такие компании, как эти, выпускают агентные продукты, мы все должны ожидать скорого дня, когда агенты будут игнорировать robots.txt и просто делать все, что им заблагорассудится. Чтобы было ясно, ничего подобного нет в предварительном просмотре условий обслуживания *Meta.
*Facebook, *Instagram и *WhatsApp принадлежат компании *Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории Российской Федерации.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Mike Pearl




