ボットを自分のルールに従わせる

生成 AI や大規模言語モデル (LLMs) のような AI アプリケーションのためのボットクローラーは、多くの場合、元のソースへの同意や帰属なしに、コンテンツをスクレイピングし、消費し、学習します。同意も帰属もないスクレイピングは、LLM 企業が無許可で価値あるコンテンツから利益を得ることを可能にし、収益を生み出すためにオリジナルコンテンツの価値に依存している組織のビジネスモデルを直接的に脅かしています。さらに悪いことに、AI ボットクローラーの活動の爆発的な増加は、Web サイトのパフォーマンスに悪影響を及ぼし、見返りに価値を提供せずに帯域幅を消費します。