Patreon、AIボットスクレイピングをブロックへ転換
Patreon は、従来の robots.txt による要請から、Cloudflare と連携した AI ボットへの直接的なブロックへ方針を転換し、クリエイターコンテンツの無断学習に対する防御を強化した。
キーポイント
ポリシーの根本的転換:要請から強制ブロックへ
Patreon は、AI ボットにスクレイピングを「依頼」する従来の robots.txt 方式を見直し、Cloudflare の技術を用いて学習用ボットのアクセス自体を強制的に遮断する方針へ変更した。
Cloudflare との戦略的連携と新機能
同社は Cloudflare の「AI Crawl Control」および「Pay Per Crawl(スクレイピング課金)」などのツールを活用し、広告掲載ページでのミックスユースボットのデフォルトブロックなど、より厳格な制御を実現している。
新たなリスク要因への対応
2023 年の対策以降、スクレイピング技術が高度化し、さらに「Home Feed」や「Quips」といった新機能により公開範囲が広がったため、より強力な防御措置が必要となったと説明している。
コンセント(同意)の再定義
Patreon は「スクレイパーがどのように振る舞うかに依存して同意が決まるべきではない」という立場を明確にし、ボットの自己規制に頼らない絶対的な権利保護を掲げている。
AI スクレイパーのブロック効果
Patreon の対策により、個別の AI 学習用クローラーからのアクセス試行が週数千回からゼロに減少し、robots.txt を無視していたスクレイパーが停止したことが確認された。
検索インデックス機能の維持
Patreon はユーザーを自サイトへ誘導する目的でページを索引付け・整理するボットについては、引き続きアクセスを許可する方針を示している。
クリエイターの権利強化
同社は AI 技術の普及に伴い、クリエイターが自身の作品がどのように利用されるかについて意味のある発言権を持つべきだと考え、他サイトとは異なるビジョンを掲げている。
重要な引用
"Consent shouldn't depend on whether a scraper chooses to behave."
Patreon is working with internet infrastructure provider Cloudflare to directly block access to AI bots designed to train their AI models on creators' work without permission.
individual AI training crawlers' weekly attempts to access Patreon went from 'thousands of attempts to zero'
"On most of the Internet, creators have to accept AI training on their work just to reach and grow an audience. Patreon has a different vision: creators should be able to grow their audience and control how their work is used."
"When testing the features, individual AI training crawlers' weekly attempts to access Patreon went from 'thousands of attempts to zero,'... That indicates that the AI scrapers were ignoring Patreon's robots.txt file and scraping the site anyway"
影響分析・編集コメントを表示
影響分析
この動きは、コンテンツプラットフォーム側が AI 学習データの収集に対して「許可制」から「拒否権行使(オプトアウトの強化)」へ移行する重要な転換点を示しています。業界全体として、AI モデル開発者が無断でデータを収集する慣行に対する法的・技術的リスクが高まっており、今後は Cloudflare のようなインフラ事業者を介した標準的なブロックメカニズムがデファクトスタンダードになる可能性があります。
編集コメント
Patreon の今回の方針転換は、単なる技術的対策を超え、生成 AI 時代におけるコンテンツ所有権の定義そのものを再構築する動きと言えます。特に「同意はボットの振る舞いに依存すべきではない」という宣言は、今後の AI エコシステムにおけるプラットフォームと開発者の関係性を決定づける重要な先例となるでしょう。
クリエイター向けのメンバーシッププラットフォーム「Patreon」は、AI が学習目的で自社のコンテンツをスクレイピング(収集)する行為に対して厳格な対策を強化しています。同社は木曜日、クラウドインフラ事業者の Cloudflare と連携し、許可なくクリエイターの作品を AI モデルのトレーニングに利用しようとする AI ボットへのアクセスを直接ブロックする取り組みを開始したと発表しました。
同社によると、この強化措置が必要になったのは、AI によるスクレイピング技術が 2023 年にボットの検知対策を導入して以降、より巧妙化しているためです。さらに、Patreon の有料コンテンツへのアクセス制限(ペイウォール)は長年、多くのクリエイターの作品をクローラーから守ってきました。しかし最近、同社はホームフィードの再設計や、Twitter 風の「Quips」といった新しい発見機能を実装しました。これらの新機能が、かえってクローラーによるコンテンツへのアクセス経路を増やす結果となっているのです。
オンライン出版者やコンテンツクリエイターたちが、AI が自らの作品を学習させてモデルを賢くする目的で取り込んでいる現状に直面し始めたことで、こうした変化が生まれました。これに対抗するため、Cloudflare は現在、ウェブサイト出版者が AI ボットの利用を制限できるツールを提供しています。その中には、AI ボットがスクレイピングを行う際に課金させることができる「Pay Per Crawl」と呼ばれるマーケットプレイスも含まれています。
先月、同社は方針を変更しました。「混合利用」クローラー、つまりウェブサイトのコンテンツを検索インデックス化するだけでなく学習にも使用するボットは、広告を掲載しているページではデフォルトでブロックされるようになったのです。
Patreon は、既存の Cloudflare との連携をさらに強化し、同社の「AI Crawl Control」技術を活用して AI に関するポリシーと執行ツールを更新すると発表しました。ここでの決定的な違いは、robots.txt ファイルを通じて AI クローラーに対してコンテンツのスクレイピングを自粛するよう求める従来の標準的な手法にとどまらず、Patreon が現在では AI の学習用ボットを積極的にブロックしている点です。
「同意の有無は、スクレイパーがどのように振る舞うかにかかっていてはいけません」と、Patreon のブログ記事はより厳格な措置について説明しています。
機能テストの結果、個別の AI 学習用クローラーによる Patreon への週次アクセス試行は「数千回からゼロ」に激減したと記事は指摘しています。これは、AI スクレイパーが Patreon の robots.txt ファイルを無視し、同社の要請にもかかわらずサイトをスクレイピングしていたことを示唆しています。
ただし、同社はページを検索エンジンに登録したり、情報を整理してユーザーを Patreon へ誘導できるようなボットについては許可すると述べています。
「AI エージェントがますます強力になり普及する中で、クリエイターは自らの作品が AI 企業によってどう使われるかについて、実質的な発言権を持つべきです」と、Patreon のプロダクト責任者である Drew Rowny は発表で語りました。「インターネットの大半では、クリエイターはオーディエンスに到達し成長させるために、AI による学習を作品に対して受け入れるしかありません。しかし Patreon のビジョンは異なります。クリエイターはオーディエンを育てつつ、自らの作品の利用方法をコントロールできるべきなのです」
*当記事内のリンクを通じて購入された場合、私たちは少額のコミッションを受け取る可能性があります。これは編集の独立性には影響しません。
Sarah は 2011 年 8 月から TechCrunch の記者を務めています。それ以前は ReadWriteWeb で 3 年以上勤務し、その後同社に入社しました。記者としての活動に先立ち、Sarah は銀行、小売、ソフトウェアなど様々な業界で IT 関連の業務に従事していました。
Sarah 氏への連絡や、 outreach の確認は、sarahp@techcrunch.com 宛てのメール、または Signal で sarahperez.01 へ暗号化メッセージを送ることで可能です。
原文を表示
Patreon, the membership platform for creators, is cracking down on AI scraping its content for training purposes. On Thursday, the company shared that it’s working with internet infrastructure provider Cloudflare to directly block access to AI bots designed to train their AI models on creators’ work without permission.
The strengthened measures were necessary because AI scraping has become more sophisticated since it first put measures in place to deter AI crawlers in 2023, the company says. In addition, Patreon’s paywall has long locked much of creators’ content out of reach of crawlers. But more recently, the company introduced new discovery tools like a redesigned Home Feed and its tweet-like Quips, which could expose more content to crawlers.
The changes come about as more online publishers and content creators are coming to grips with how AI is ingesting their work for the purpose of making their AI models smarter. To combat this, Cloudflare now offers tools that allow website publishers to restrict AI bots, including a marketplace that lets websites charge AI bots for scraping, dubbed Pay Per Crawl. Earlier this month, it changed its policies so that “mixed-use” crawlers, meaning those that both index and train on a website’s content, are blocked by default on any pages that host ads.
Patreon says that it’s extending its existing work with Cloudflare to use the company’s AI Crawl Control technology to update its AI policies and enforcement tools. The difference here is that instead of simply asking AI crawlers not to scrape content using the robots.txt files — a standard way to provide bots with instructions on how they can use its site — Patreon is now actively blocking AI training bots.
“Consent shouldn’t depend on whether a scraper chooses to behave,” a Patreon blog post explains, referencing the stricter measures.
When testing the features, individual AI training crawlers’ weekly attempts to access Patreon went from “thousands of attempts to zero,” the post noted. That indicates that the AI scrapers were ignoring Patreon’s robots.txt file and scraping the site anyway, despite its requests.
However, the company said that it will allow bots that index pages and organize information that can be used to send users back to Patreon.
“As AI agents become increasingly powerful and popular, creators deserve a meaningful say in how their work is used by AI companies,” remarked Patreon’s product chief Drew Rowny in the announcement. “On most of the Internet, creators have to accept AI training on their work just to reach and grow an audience. Patreon has a different vision: creators should be able to grow their audience and control how their work is used.”
*When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.*
Sarah has worked as a reporter for TechCrunch since August 2011. She joined the company after having previously spent over three years at ReadWriteWeb. Prior to her work as a reporter, Sarah worked in I.T. across a number of industries, including banking, retail and software.
You can contact or verify outreach from Sarah by emailing sarahp@techcrunch.com or via encrypted message at sarahperez.01 on Signal.
関連記事
今日のまとめ
AI日報で今日の重要ニュースをまとめ読み