サクサク読めて、アプリ限定の機能も多数!
“「LLMの生成物は何のコミュニケーションも目的としない、誰によって書かれたものでもない、非常に雑多なものです。これをwordfreqのデータに含めてしまうと、単語の使用頻度データが歪んでしまいます」”
hobo_king のブックマーク 2024/09/24 14:05
自然言語ライブラリ「wordfreq」がAIで汚染され更新不可能になったと作者が報告[ あとで読む]“「LLMの生成物は何のコミュニケーションも目的としない、誰によって書かれたものでもない、非常に雑多なものです。これをwordfreqのデータに含めてしまうと、単語の使用頻度データが歪んでしまいます」”2024/09/24 14:05
このブックマークにはスターがありません。 最初のスターをつけてみよう!
gigazine.net2024/09/24
さまざまなデータベースをもとに、自然言語の使用頻度を調べるためのPythonライブラリが「wordfreq」です。そんなwordfreqが、「AIで汚染され更新不可能となってしまった」と開発者のRobyn Speer氏が報告していま...
148 人がブックマーク・34 件のコメント
\ コメントが サクサク読める アプリです /
“「LLMの生成物は何のコミュニケーションも目的としない、誰によって書かれたものでもない、非常に雑多なものです。これをwordfreqのデータに含めてしまうと、単語の使用頻度データが歪んでしまいます」”
このブックマークにはスターがありません。
最初のスターをつけてみよう!