概要
Googleは2026年3月20日、公式ウェブフェッチャーリストにGoogle-Agentという新しいエントリを静かに追加しました。これは、ユーザーに代わってウェブサイトを閲覧する、Googleインフラ上で稼働するAIシステム用のユーザーエージェント文字列です。
AIアシスタントに製品のリサーチやフォームへの入力などを依頼すると、実際にページを訪問するのがGoogle-Agentです。Googleの実験的なAIブラウジングツールであるProject Marinerが、これを最初に利用しています。
Google-AgentはGooglebotとは異なります。Googlebotがウェブを継続的にクロールして検索用にページをインデックスするのに対し、Google-Agentは人間が要求した場合にのみ動作します。
GoogleはGoogle-Agentを「ユーザーによってトリガーされるフェッチャー」と分類しており、このカテゴリのツールは「一般的にrobots.txtのルールを無視する」という立場を取っています。これは、人間がブラウザでURLを入力するのと同様の原則に基づいています。
ChatGPT-UserやClaude-Userといった他のAIエージェントはrobots.txtの指示を尊重しますが、Google-Agentは尊重しません。このため、ウェブサイト運営者がrobots.txtを唯一のアクセス制御メカニズムとして信頼している場合、ギャップが生じることになります。
Google-Agentからのアクセスを制限する必要がある場合は、人間による訪問者をブロックするのと同じように、サーバー側の認証またはアクセス制御が必要です。
さらに重要なのは、Google-Agentがweb-bot-authプロトコルの実験を行っていることです。これは、ボット用のデジタルパスポートのように機能するIETFのドラフト標準で、各エージェントが暗号的に署名したHTTPリクエストを送信し、ウェブサイト側でその正当性を検証できます。
ユーザーエージェント文字列は誰でも偽装できますが、Web Bot Authは偽装できません。Googleがこのプロトコルを実験的に採用していることは、エージェントのIDが向かう方向性を示しています。Akamai、Cloudflare、Amazon (AgentCore Browser)も既にこれをサポートしています。
ウェブサイトは今後、正規のAIエージェントと、エージェントを装うスクレイパーとを区別する必要があるため、この暗号学的識別は非常に重要です。
Google-Agentは、ウェブに人間、クローラー（Googlebot、GPTBot、Google-Extended）、そして特定の人間をリアルタイムで代行するエージェント（Google-Agent、ChatGPT-User、Claude-User）という3層の訪問者モデルを作り出します。
ウェブサイト運営者が今すぐ行うべきことは、ログを監視し（compatible; Google-Agentという文字列で識別されます）、CDNおよびファイアウォールルールを確認し、フォームやフローがAIエージェントに対応できるかテストすることです。
robots.txtが完全なアクセス制御ツールではないことを受け入れ、本当に制限する必要があるコンテンツには認証を使用すべきです。AIエージェントがウェブサイトを閲覧する「ハイブリッドウェブ」は既に現実のものとなっており、すべてのページが人間と機械の両方のオーディエンスに同時にサービスを提供する時代が来ています。
解説
今回のGoogle-Agentの発表は、ウェブの未来、特にSEOとウェブサイトの管理方法に大きな影響を与えるものです。これまでボットといえばrobots.txtで簡単に制御できるものという認識がありましたが、その前提が覆されます。
最大のポイントは、Google-Agentがユーザーの代理であるためrobots.txtを無視するというGoogleの判断です。これにより、機密性の高いコンテンツや、アクセスを制限したいページを保護するためには、robots.txtだけでは不十分になります。ウェブサイト運営者は、従来のサーバーサイド認証やアクセス制御といった、人間からのアクセス制限と同じレベルのセキュリティ対策を講じる必要があります。
Web Bot Authプロトコルの導入は、ウェブにおける「信頼」の基盤を変える可能性を秘めています。ユーザーエージェント文字列は簡単に偽装できるため、これまでボットの正当性を完全に確認することは困難でした。しかし、暗号署名によって正規のAIエージェントと悪意のあるスクレイパーを確実に区別できるようになります。
この識別能力は、ウェブサイトがAIエージェントに対してよりきめ細やかなアクセスポリシーを適用することを可能にします。例えば、信頼できるAIエージェントには特定のAPIへのアクセスを許可し、他のエージェントには制限するといった運用が可能になり、新たなビジネス機会が生まれるかもしれません。
ウェブサイトの設計においては、AIエージェントがスムーズにタスクを完了できるよう、セマンティックHTMLの利用や明確なフォームラベルがこれまで以上に重要になります。JavaScriptに過度に依存した複雑なUIは、AIエージェントにとって障壁となる可能性があります。
また、ログを詳細に監視し、Google-Agentがどのようにウェブサイトを訪問し、どのコンテンツに価値を見出しているかを理解することは、今後のコンテンツ戦略やUX改善に不可欠です。ウェブはもはや人間だけの世界ではなく、人間とAIエージェントが共存する「ハイブリッドウェブ」であるという意識を強く持つ必要があります。この変化に適応することが、次世代のウェブ戦略の鍵となるでしょう。
- 掲載元: Search engine journal
- 公開日: 2026-05-17T12:00:45+00:00
Google-Agent: The Web’s New Visitor Just Got An Identity via @sejournal, @slobodanmanic
