В своем последнем заявлении Reddit объявил о планируемых изменениях в политике использования своих данных компаниями, занимающимися разработкой искусственного интеллекта. Изменения коснутся веб-стандарта robots.txt, который определяет доступ автоматизированных ботов к сайту. Цель изменений – предотвратить незаконное сканирование контента.
Традиционно стандарт robots.txt использовался для управления доступом поисковых систем к сайту и направления пользователей к нужному контенту. Однако с появлением ИИ многие компании стали использовать данные сайтов для обучения своих моделей, не обращая внимания на источник информации и нарушая авторские права. Reddit решил положить этому конец.
В рамках новой политики Reddit не только обновит стандарт robots.txt, но и ужесточит контроль над доступом к платформе неизвестных ботов и сканеров. Доступ будет ограничен или заблокирован для тех, кто не соблюдает политику Reddit или не имеет соглашения с платформой.
Reddit подчеркивает, что изменения не коснутся большинства пользователей или добросовестных участников, таких как исследователи и организации, например, Internet Archive. Новая политика направлена на предотвращение использования контента Reddit для обучения моделей ИИ без согласия платформы.
Объявление Reddit появилось на фоне недавнего расследования журнала Wired, которое выявило, что стартап Perplexity использовал данные платформы без разрешения. Perplexity отрицает нарушения, утверждая, что стандарт robots.txt не имеет юридической силы.
Важно отметить, что Reddit уже заключил соглашения с некоторыми компаниями на использование своих данных. Например, Google заплатил 60 миллионов долларов за право обучать свои модели ИИ на данных Reddit. Таким образом, платформа даёт четкий сигнал: доступ к ее данным теперь платный.
Новое заявление – логичное продолжение политики, представленной Reddit несколько недель назад, которая направлена на регулирование использования данных платформы коммерческими организациями и партнерами.
Источник
Источник: habr.com
