Робин Спир, создатель проекта Wordfreq с открытым исходным кодом, объявил о прекращении работы инструмента из-за чрезмерного влияния ИИ-спама. Wordfreq отслеживал языковые тенденции, анализируя миллионы источников на таких платформах, как Википедия, новостные статьи, Reddit и другие, охватывая более 40 языков. Он широко использовался учеными, изучающими эволюцию языка и культуры.
В своем заявлении на странице проекта на GitHub Спир объяснила, что Интернет, который обеспечивал большую часть данных для Wordfreq, теперь наводнен контентом, созданным искусственным интеллектом. Она отметила, что если традиционный спам можно отфильтровать, то текст, созданный крупными языковыми моделями, «маскируется под реальный язык», что делает невозможным выявление истинных тенденций использования текста людьми.
Спир подчеркнула, что достоверная информация об использовании языка после 2021 года недостижима, что и привело к закрытию проекта.
Источник: www.ferra.ru
Похожие новости:
NVIDIA готовится полностью перейти на ядра графических процессоров с открытым исходным кодом с драйверами R560
NVIDIA готовится полностью перейти на ядра графических процессоров с открытым исходным кодом с драйверами R560
В суде США разваливается коллективный иск «разработчики против Microsoft, GitHub и OpenAI из-за работы GitHub Copilot»
Сообщество HDMI Forum отклонило драйвер AMD HDMI 2.1 с открытым исходным кодом