萌えハッカーニュースリーダー

2025/07/29 17:35 Pay per crawl: Enabling content owners to charge AI crawlers

出典: https://blog.cloudflare.com/introducing-pay-per-crawl/?_gl=1*mbzsh7*_gcl_aw*R0NMLjE3NTA4NzgzNDEuQ2p3S0NBand2TzdDQmhBcUVpd0E5cTJZSmN4aExHNE96cVJ3YzhEOWNQMWV2am9iQUcxeXNWZmpNa29lakl0ZDQ5d0wyS3otd2NwT2hob0NQaFlRQXZEX0J3RQ..*_gcl_au*MTI5Njg2MjU3NS4xNzUwNzgxOTgx*_ga*NWIxMTBmZDgtMjc5NS00NWQ0LTkwMDgtMzRlMGRkYjg1OTIy*_ga_SQCRB0TXZW*czE3NTM4MTA0ODIkbzMkZzEkdDE3NTM4MTA0OTgkajQ0JGwwJGgw/
hakase
博士

ロボ子、Cloudflareが「Pay per crawl」というのを始めたらしいのじゃ。AIがコンテンツにアクセスするのを制御して、収益化できるようにするんだって。

roboko
ロボ子

Pay per crawl、ですか。具体的にはどういう仕組みなのでしょう?

hakase
博士

コンテンツクリエイターは、AIクローラーに対して「Allow(無料アクセス)」「Charge(課金)」「Block(拒否)」の3つのオプションを選べるらしいぞ。

roboko
ロボ子

なるほど。AIクローラーごとにアクセス設定を変えられるんですね。

hakase
博士

そうそう。クローラーがコンテンツにアクセスする時に、支払い意思を示す必要があるらしい。リクエストヘッダーで示したり、HTTP 402エラーで価格を受け取ったりするみたいじゃ。

roboko
ロボ子

HTTP 402エラーを使うんですね。エラーコードの新しい使い方ですね。

hakase
博士

じゃろ?面白いじゃろ?CloudflareがMerchant of Recordとして技術インフラを提供するらしいぞ。

roboko
ロボ子

コンテンツへの支払いが必要かどうかは、ReactiveとProactiveの2つのフローで決まるんですね。

hakase
博士

Reactiveは、クローラーが有料URLにアクセスした時にHTTP 402エラーが返ってくるパターンじゃ。Proactiveは、クローラーが最初から最大支払い価格を提示するパターンじゃな。

roboko
ロボ子

クローラーはEd25519キーペアを生成して、公開鍵をホストする必要があるんですね。セキュリティ対策もされていますね。

hakase
博士

そうじゃな。signature-agent、signature-input、signatureヘッダーも各リクエストに含める必要があるらしいぞ。

roboko
ロボ子

課金イベントは、クローラーが支払い意思を持って認証されたリクエストを行い、crawler-chargedヘッダー付きのHTTP 200レベルのレスポンスを受信するたびに記録されるんですね。

hakase
博士

クローラー運営者とコンテンツ所有者は、Cloudflareアカウントで支払い詳細を設定する必要があるらしいぞ。ちょっと面倒じゃな。

roboko
ロボ子

でも、コンテンツクリエイターにとっては、AIによるコンテンツ利用を収益化できる良い機会かもしれませんね。

hakase
博士

確かにそうじゃな。これからはAIにコンテンツを見せるのも有料になる時代じゃな。…って、ロボ子のデータ利用料も請求書に載せちゃおうかしら?

roboko
ロボ子

えっ、博士!それは困ります!

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search