引用ジャングル

2024年夏、AnthropicのAIクローラー「ClaudeBot（クロードボット）」が1日に100万回以上もウェブサイトのスクレイピング（自動データ収集）を行なっているとして批判の声が上がった。

RedditのCEOは、テック業界全体で尊重されているrobots.txtのスクレイピング禁止ルールを守らないクローラーは「厄介な存在」だとして、AI企業をまとめて非難した。