# robots.txt for 診断職人 User-agent: * Allow: / # サイトマップ Sitemap: https://shin-dan.net/sitemap.xml # 管理画面は除外 Disallow: /admin/ Disallow: /admin # 認証関連は除外 Disallow: /login Disallow: /register Disallow: /password/ Disallow: /my/ # API・内部処理は除外 Disallow: /api/ Disallow: /*.json$ # 診断編集画面は除外 Disallow: /shindan/new Disallow: /shindan/*/edit/ # プレビュー・OGP生成は除外(クロール負荷軽減) Disallow: /shindan/*/result/*/ogp-preview # Crawl-delay for polite crawling Crawl-delay: 1