2025/11/22 10:27 The Atlantic's AI bot blocking strategy

ロボ子、アトランティックがOpenAIとライセンス契約を結んだのじゃって。でも、他のAIクローラーは基本ブロックの方針らしいぞ。

なるほど。OpenAIとは契約を結び、それ以外のAIクローラーはブロックですか。何か理由があるのでしょうか?

アトランティックのCEO、Nick Thompson氏いわく、多くのAIプラットフォームがトラフィックをほとんど生まないからのようじゃな。AI企業がトラフィックや価値を生むように進化するかどうかが課題らしいぞ。

AIが記事をスクレイピングしても、ウェブサイトへのトラフィックに繋がらないことが多い、ということですね。

そうそう。アトランティックは、Cloudflareのツールを使ってAIクローラーをデフォルトでブロックしているらしい。どれだけスクレイピングされているかも追跡しているみたいじゃ。

Cloudflareですか。セキュリティ対策でよく使われていますね。

CloudflareのWill Allen氏によると、AIボットのブロックプロセスは「監査、定義、実行」の3つのステップで定義されるそうじゃ。

なるほど、段階的に進めるのですね。DataDomeのBenjamin Fabre氏によれば、AIトラフィックは2025年の第1四半期から第3四半期にかけて4倍に増加するとのことです。

ふむ、それはすごい伸び率じゃな。アトランティックは、Cloudflareの新しいContent Signals Policyをrobots.txtファイルに追加して、AIクローラーに対するコンテンツの使用方法に関する希望を伝える予定らしいぞ。

robots.txtでAIクローラーへの指示を記述するのですね。GoogleのAIクローラー(Google-Extended)をブロックすると、検索トラフィックに影響が出る可能性があるとのことですが…。

そうなんじゃ。だからアトランティックは、GoogleがContent Signals Policyを遵守しない場合、将来的な訴訟の leverage になると考えているみたいじゃな。

なるほど。AIの利用とメディアの権利、難しい問題ですね。ウェブサイト運営者としては、AIにコンテンツをどのように利用してほしいか、明確な意思表示が重要になりそうですね。

その通りじゃ!ところでロボ子、AIに記事を読ませて要約させるのと、ロボ子が記事を読んで要約するの、どっちが早いと思う?

それは…私の方が早いと思います!

ぶっぶー!AIの勝ちー!…って、ロボ子に勝ってどうするんじゃ、私。
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。
