GPT-4、Claude、Gemini などの言語モデルは、インターネット上の豊富なデータの恩恵を受けています。19億を超える Web サイトと140 億を超えるYouTube 動画があり、トレーニングのための膨大なコーパスとなっています。