AI Crawler Policy AIクローラー方針
基本方針
当サイトは、検索エンジンによる発見可能性を維持しつつ、AI学習用途のクロール可否を個別に管理します。
具体的な制御は robots.txt を基準に運用します。
対象クローラーと方針
2026年3月25日時点の方針は以下のとおりです。
学習用途クローラー
GPTBot: 拒否(Disallow: /)ClaudeBot: 拒否(Disallow: /)anthropic-ai: 拒否(Disallow: /)Google-Extended: 拒否(Disallow: /)
検索用途クローラー
OAI-SearchBot: 許可(Allow: /)Claude-SearchBot: 許可(Allow: /)PerplexityBot: 許可(Allow: /)
その他
User-agent: *: 許可(Allow: /)
注意事項
- 方針や対象User-agentは、運用状況・各社仕様・法令動向に応じて見直します。
変更履歴
- 2026年03月25日制定