# --------------------------------------------------------- # 一般的なクローラーへの指示 (Google, Bing, その他AI) # --------------------------------------------------------- User-agent: * # 既存のブロック設定 Disallow: /asp # [追加] llm.txtに基づくセキュリティ設定(個人情報・回答データ保護) Disallow: /admin/ Disallow: /user/ Disallow: /private/ Disallow: /open/ Disallow: /ans/ # --------------------------------------------------------- # GPTBot (ChatGPT) への追加指示 # --------------------------------------------------------- # GPTBotなどの特定のBotを指定すると、上記の「User-agent: *」の設定が # 無視される場合があるため、ここでも重要な禁止ルールを繰り返します。 User-agent: GPTBot Disallow: /asp Disallow: /admin/ Disallow: /user/ Disallow: /private/ Disallow: /open/ Disallow: /ans/ Disallow: /blog/internal-memo/ # --------------------------------------------------------- # サイトマップ (既存設定を維持) # --------------------------------------------------------- Sitemap: https://surveroid.jp/sitemap.xml Sitemap: https://surveroid.jp/images_sitemap.xml Sitemap: https://surveroid.jp/mr-journal/media/sitemap.xml