User-Agent: * Disallow: /archive/ Disallow: /store/reserve/ Disallow: /recruit.ordersuit.info/ # Ahrefs や SEOkicks など不要なクローラーを禁止 User-agent: AhrefsSiteAudit Disallow: / User-agent: SEOkicks Disallow: / # 以下のパラメータを含むURLをクロールしないように指定 Disallow: /*?yclid= Disallow: /*?gad_source= Disallow: /*?fbclid= Disallow: /*?gclid= Disallow: /*?gbraid= Sitemap: https://www.ordersuit.info/sitemap.xml # Googlebot や bingbot は許可しつつ crawl-delay を設定 User-agent: Googlebot Crawl-delay: 10 User-agent: bingbot Crawl-delay: 10