税理士サイトが特にリスクが高い理由
税務・会計分野の専門コンテンツは、ChatGPTやClaudeなどのAIが「高品質な情報源」として優先的に学習する対象です。確定申告の手順、法人税の節税策、相続税対策——こうした専門知識は、税理士が長年の実務と研究を経て積み上げたものです。
ところが現状、多くの税理士事務所サイトではrobots.txtにAIボットの記載がなく、GPTBot・ClaudeBot・PerplexityBotなど13種類以上のAIクローラーが毎日コンテンツを収集しています。
実際に何が起きているのか
AIボットがサイトを収集すると、次のことが起きます：
- ChatGPTやClaudeが「税理士サイトの情報を参考に…」と回答する（出典表示なし）
- PerplexityなどのAI検索エンジンがコンテンツを要約して表示（サイトへの流入が減少）
- AI生成コンテンツが検索結果を占拠し、専門家サイトのSEO順位が下落
つまり、あなたが作ったコンテンツがAIを通じて競合他社や別の税理士の宣伝に使われる可能性があります。
robots.txtでAIボットをブロックする方法
最も簡単な対策はrobots.txtへの追記です。サイトのルートディレクトリに以下を追加してください：
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Disallow: /
User-agent: ClaudeBot
Disallow: /
User-agent: anthropic-ai
Disallow: /
User-agent: PerplexityBot
Disallow: /
User-agent: CCBot
Disallow: /
User-agent: Google-Extended
Disallow: /
User-agent: Diffbot
Disallow: /
User-agent: Bytespider
Disallow: /
User-agent: Amazonbot
Disallow: /
User-agent: YouBot
Disallow: /
User-agent: cohere-ai
Disallow: /
User-agent: MistralBot
Disallow: /WordPressの場合
WordPressを使っている場合、Yoast SEOプラグインの「ツール → ファイルエディター」からrobots.txtを直接編集できます。または、テーマのfunctions.phpに以下を追加する方法もあります：
add_action('do_robots', function() {
echo "User-agent: GPTBot
Disallow: /
";
echo "User-agent: ClaudeBot
Disallow: /
";
echo "User-agent: PerplexityBot
Disallow: /
";
});ブロックしていないAIボットを確認する方法
自分のサイトが何種類のAIボットにブロックされているかを無料で確認できます。AI Access Monitorでは、URLを入力するだけでrobots.txtの解析結果と未ブロックのAIボット一覧を表示します。
ブロックだけでなく「使用料請求」も可能
AI Access Monitorのプロプランでは、AIボットのアクセスに対してHTTP 402を返し、ライセンス契約なしのクロールを拒否する「Tollgate」機能を利用できます。コンテンツを守るだけでなく、使用料収入を得る仕組みが実装できます。
税理士事務所のような専門コンテンツサイトこそ、この仕組みが最も有効に機能します。