# 1. 全てのクローラーに対する基本設定 (Googleは無視するが他には効く) User-agent: * Crawl-delay: 10 Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php # 2. 特にアクセスが激しい特定のクローラーへの個別設定 User-agent: Bingbot Crawl-delay: 20 User-agent: Baiduspider Crawl-delay: 120 User-agent: YandexBot Crawl-delay: 120 User-agent: SERankingBacklinksBot Crawl-delay: 120 # 3. 負荷ばかりかけてメリットが少ないSEO・分析系Botを拒否(必要に応じて) User-agent: AhrefsBot Disallow: / User-agent: SemrushBot Disallow: / User-agent: MJ12bot Disallow: / # サイトマップの指定 Sitemap: https://www.regina-web.jp/sitemap.xml Sitemap: https://www.regina-web.jp/sitemap.rss