本文へ移動
Harch AI Lab AI Learning & Research Mediapowered by Artiql Inc.

AIPREF(AI Preferences)とは・意味、仕組み・AI企業の対応方針・限界

AIPREFとは?

AIPREF(AI Preferences)とは、ウェブなどのコンテンツをAIの学習などに使ってよいかという意向を、機械が読める形で示すための標準づくりの取り組みのこと。インターネットの技術標準を作る IETF(Internet Engineering Task Force)の作業部会の名前で、略称は aipref と表記する。

作業部会は設立の文書で、AIのモデルの開発、展開、利用のためにコンテンツがどう集められ、どう処理されるかについて意向を表す部品を標準にすることを目的に掲げる。成果物として作るのは、意向を表す語彙の文書と、意向をコンテンツに結び付ける方法の文書などだ。

2026年10月30日には、robots.txt を使ってAI学習への意向を示す方式のドラフトが出た。robots.txt は、サイトの運営者がクローラー(ウェブのページを自動で集めるプログラム)に向けて置くファイルだ。この方式では、User-Agent の行に「__usage_ai-training」というポリシートークン(policy token)を書く。

OpenAI、Google、Microsoft は同じ日に、この共通のシグナルに対応する方針を発表した。OpenAI は日本語の発表で、これを「robots.txt の共通シグナル」と呼んでいる。ドラフトを書いた Anthropic の Kevin Kelley 氏は、同社がすでに対応の実装を始めたと明らかにした。

AIPREFの仕組み

語彙はコンテンツの使い道を3つに分ける

作業部会の語彙のドラフト(2026年9月の版番号08)は、コンテンツの使い道を、次の区分に分けている。

  • AI Training(train-ai):コンテンツを使って、生成AIのモデルが学習で得たパラメーターを変えること。生成以外の作業だけに使うモデルの学習は含まない。
  • AI Use(ai-use):利用者が直接渡したのではないコンテンツを、生成AIのモデルへの入力に使うこと。
  • Search(search):コンテンツを選んで、その場所へ利用者を案内することが主な目的のアプリで使うこと。元の場所へのリンクを示すことなどが条件で、要約の生成は含まない。

区分ごとの意向は「許可」か「不許可」で示し、示されていない区分は「不明」として扱う。区分の定義などの節には、作業部会の合意がまだないという注記が付いている。

ポリシートークンは今の robots.txt の書き方で意向を示す

Kelley 氏のドラフトの例では、「User-Agent: __usage_ai-training」の行の下に「Disallow: /」と「Allow: /press-kit/」を書く。これは /press-kit/ の下でだけAI学習に賛成し、ほかのすべての場所では反対するという意向になる。

ポリシートークンの方式は、新しい命令の名前や文法を足さない。場所の書き方や、いちばん長く一致した指定を優先する決まりは、robots.txt の今の規格(RFC 9309)のままだ。この方式に対応していない読み取りのプログラムは、知らないクローラー向けの指定として読み飛ばす。

すべてのクローラー向けの「User-Agent: *」の指定は、ポリシートークンに当たるものとして読まない。ファイルにこのトークンの指定がひとつもなければ、意向は示されていないことになる。

ポリシートークンという語は、このドラフトが示した呼び名だ。Kelley 氏は、どのクローラーが取得してよいかではなく、コンテンツの使い道を決めるトークンを出しているクローラーの運営者がすでにいると説明する。ポリシートークンは、この型を特定の会社に寄らない名前で呼ぶ語で、1社が定めたものはドラフトの中で「proprietary policy token」(独自のポリシートークン)と呼ばれている。

使い道の意向と集めてよいかの指定は別

Kelley 氏はドラフトで、ポリシートークンをクロール(ページを集める動き)の指示ではないとしている。クローラーごとの名前で書いた指定は、これまでどおり、ページを集めてよいかを示す。

意向を受け取る側が意向をクロールの判断に使うことは、ドラフトの中で認められている。たとえば、トークンが表す目的のためだけに集めるクローラーは、反対の意向が示された場所を取りに行かなくてもよいとしている。

ポリシートークンと作業部会の付与方法のドラフトとの違い

作業部会には、意向をコンテンツに結び付ける方法を定める別のドラフトがある。付与方法のドラフトが定めるのは、robots.txt に「Content-Usage」という新しい規則を足す方式と、HTTP の応答のヘッダーで示す方式だ。Kelley 氏は、語彙の作業を進めるためにいったん脇に置かれたこの付与方法のドラフトと自分のドラフトは違うと説明し、作業部会の付与方法の作業への提案として出した。

方式 文書 robots.txt での書き方 指定できる用途
ポリシートークン Kelley 氏の個人のドラフト User-Agent の行に「__usage_ai-training」と記述し、Disallow と Allow で反対と賛成を示す AI Training だけ
Content-Usage 作業部会のドラフト 「Content-Usage: train-ai=n」のような新しい規則を足す。HTTP の応答のヘッダーにも同じ形で書ける 語彙のドラフトの区分

※2026年11月時点

AIPREFが生まれた背景

OpenAI によると、サイトの運営者はこれまで、クローラーを1つずつ見分け、AIの会社ごとに決まりを管理しなければならなかった。複数の会社が共通のシグナルに対応すれば、この負担を減らせるという。

Google は2023年9月に、Bard と Vertex AI の生成AIの API の改善にサイトを使わせるかを、サイトの運営者が robots.txt で選べる指定「Google-Extended」を発表した。

Google は同じ発表で、AIの使い道が広がれば、運営者がさまざまな使い道を管理する手間はさらに増えるとも書いている。そのうえで、機械が読める選択の方法をほかにもウェブとAIの関係者と探るとした。

EU の汎用AIモデルの行動規範(2025年7月公表)に署名した提供者が守る約束は、規範の著作権の章に定められている。その1つとして、テキスト・データマイニングや汎用AIモデルの学習のためにクローラーを使う場合、RFC 9309 と、IETF が実装できると示したその後の版に沿った robots.txt の指示を読んで従うクローラーを使うという。

Google は、共通の制御の提案が EU の行動規範と整合すると説明している。

日本では、文化審議会著作権分科会法制度小委員会が2024年3月に「AIと著作権に関する考え方について」をまとめた。小委員会はこの文書の注で、現状の robots.txt ではあらゆる種類のクローラーを拒むことはできても、AI学習用のクローラーに限ってすべてを拒むことはできないという「技術的限界」を挙げている。

小委員会は同じ注で、AI学習用のクローラーだけをまとめて拒めるような技術的な方式が将来確立されるなどして、AI学習のデータを集める側にとって明確になることを期待している。

AIPREFに関する主な出来事・ニュース

AIPREFの共通シグナルに対するAI企業の対応方針

共通シグナルの方式は、作業部会の文書ではなく Kelley 氏の個人のドラフトに書かれている。4社の発表を比べると、対応の時期も各社がすでに設けている指定の扱いも違う。

会社 対応の時期 各社の指定との関係
OpenAI 今後数か月以内の対応を目指す robots.txt の今の制御に代わるものではなく、今の制御も引き続き適用する
Google 2027年に、ほかのAIの会社とともに対応することを目指す 共通のトークンで学習を拒み、Google-Extended を明示していないサイトは、Google-Extended を拒んだものとして扱う予定。会社ごとの制御も引き続き使える
Microsoft 2027年2月1日から、クロールの際に反映する 学習とグラウンディングについて、今の NoArchive と NoCache を新しい指定に置き換える
Anthropic 2026年10月30日の時点で、シグナルの認識を始めた。全サービスに順に広げる ClaudeBot を名指しした指定を、共通の指定より優先する

※2026年11月時点

Microsoft は、共通の学習の指定とは別に、回答の生成にコンテンツを使う「AI Grounding」の指定をページごとに設ける。どちらの指定も、示されていなければ「許可」として扱う。これらの指定はコンテンツの使い道を決めるもので、ページを集めるアクセスを決めるものではないと、同社は説明している。

Anthropic のすべてのサービスに対応を広げるには時間がかかると、Kelley 氏は記している。標準が変われば、シグナルの読み方や当てはめ方も変わることがあるという。

AIPREFの限界と日本の著作権法との関係

意向を示しても守られるとは限らない

意向が守られることまでは仕様で保証しないと、語彙のドラフトは明記している。意向を受け取った側は従うかどうかを選ぶことができ、その選び方はドラフトに定めがない。当事者どうしの個別の取り決めが共通シグナルで示した意向より優先されうることも、Kelley 氏のドラフトに定められている。

学習やグラウンディングを許可しても、回答で取り上げられることや送客、支払いが保証されるわけではないと、Microsoft は明記している。指定はライセンスや支払いの取り決めも定めない。

共通シグナルも作業部会の文書も標準になっていない

Kelley 氏は共通シグナルの方式を、誰でも出せる個人のインターネットドラフトとして出した。IETF の承認はなく、標準化の手続きで正式な位置づけもない。作業部会の語彙のドラフトの冒頭にも、このドラフトの内容は作業部会の合意を反映していないという注記がある。

作業部会の議長の Mark Nottingham 氏は、2026年11月5日にメーリングリストへ投稿した。同氏は一読した印象として、このドラフトを今の付与方法のドラフトに代わるものとして検討するのは難しいだろうと記した。この方式が明示的に伝えられるのは AI Training の語だけで、作業部会はもう少し大きい語彙を作ってきたためだ。

この方式を実装する意向を示した実装者が何社かあると、同氏は述べている。そのため、2026年11月14日からサンフランシスコで開く IETF の会合(IETF 127)で、語彙全体を robots.txt に結び付ける方法の提案として話し合う時間を取れるという。決定は通常の合意の手続きによる。

同氏はまた、「__usage_ai-training」は最終的な形ではないと記した。作業部会の語は train-ai なので、この書き方なら「__usage_train-ai」になる可能性が高いという。同氏は、2つの名前が近いのでサイトの運営者を混乱させるおそれがあるとみる。そのうえで同氏は、できればもっと区別しやすい値に変えることを検討してはどうかと提案した。

作業部会の予定では、語彙と付与方法の文書を2026年8月に IESG(IETF の標準の承認を担う組織)へ出すことになっていた。この期限は、2025年9月に2025年8月から延ばされたものだ。作業部会の文書の一覧では、2つの文書は作業部会のドラフトのままとなっている。

著作権法第30条の4のただし書との関係

著作権法第30条の4は、著作物に表された思想や感情を味わうことを目的としない利用を、原則として権利者の許諾なしに認める規定だ。文化審議会著作権分科会法制度小委員会は「AIと著作権に関する考え方について」で、著作権者が反対の意思を示したことだけで、この条文のただし書に当たるとは考えられないとしている。

小委員会は同じ文書で、AI学習のための複製を防ぐ技術的な措置の例として、robots.txt でAI学習のためのクローラーを制限する措置を挙げている。こうした措置があり、過去の実績などから将来データベースとして販売する予定がうかがえる場合もある。そのとき措置を回避してクローラーでデータを集め、AI学習のために複製する行為は、ただし書に当たることがあると、小委員会は示している。

AIPREFに関する言い方

表記 意味 使用主体
AI Preferences(aipref、AIPREF) IETF の作業部会の名前。略称は aipref で、Google は「AIPREF working group」と表記する IETF、Google
Machine-Readable Training Preference Signal ポリシートークンで AI 学習への意向を示す方式のドラフトの題 Kevin Kelley 氏
policy token コンテンツの使い道を示すために robots.txt の User-Agent の行に書く名前 Kevin Kelley 氏
proprietary policy token 1社が定めて文書にしたポリシートークン Kevin Kelley 氏
共通シグナル(robots.txt の共通シグナル) OpenAI が日本語の発表で共通のシグナルを呼ぶ言い方 OpenAI
shared AI training control Google が共通のシグナルを呼ぶ言い方 Google
shared AI Training preference Microsoft が共通のシグナルを呼ぶ言い方 Microsoft
Content-Usage 作業部会の付与方法のドラフトが定める robots.txt の規則と HTTP のヘッダーの名前 作業部会のドラフト

AIPREFに関する出典

Kevin Kelley「Machine-Readable Training Preference Signal」(2026年10月30日、IETF Datatracker)
Kevin Kelley「[[ai-control] New draft: draft-kelley-aipref-training-preference-signal-00](https://mailarchive.ietf.org/arch/msg/ai-control/mddjatOxSR0h6GmLRBWlc839c7w/)」(2026年10月30日、IETF の ai-control メーリングリスト)
Mark Nottingham「[[ai-control] Re: New draft: draft-kelley-aipref-training-preference-signal-00](https://mailarchive.ietf.org/arch/msg/ai-control/60V9tZ56eL0OsnSgO2BsfXlXfCc/)」(2026年11月5日、IETF の ai-control メーリングリスト)
IETF「AI Preferences (aipref)」
Paul Keller、Martin Thomson「A Vocabulary For Expressing AI Usage Preferences」(2026年9月14日、IETF Datatracker)
Gary Illyes、Martin Thomson「Associating AI Usage Preferences with Content in HTTP」(2026年8月19日、IETF Datatracker)
OpenAI「AI 学習への利用意向をウェブサイトが伝えやすくする仕組み」(2026年10月30日)
Google「Supporting a shared AI training control for websites」(2026年10月30日)
Microsoft「Your content, your choice: clearer preferences for training and grounding」(2026年10月30日)
Anthropic「Does Anthropic crawl data from the web, and how can site owners block the crawler?」
Google「An update on web publisher controls」(2023年9月28日)
European Commission「The General-Purpose AI Code of Practice」
European Commission「Code of Practice for General-Purpose AI Models: Copyright Chapter」
文化審議会著作権分科会法制度小委員会「AIと著作権に関する考え方について」(2024年3月15日)
IETF「AI Preferences (aipref) – History」
IETF「AI Preferences (aipref) – Documents」
IETF「IETF 127 San Francisco」
IAB「IAB Workshop on AI-CONTROL (aicontrolws)」

AIPREFに関連する記事