SEO・検索エンジン巡回制御・robots.txt・Sitemap
robots.txt 作成・生成ジェネレーター
検索エンジンクローラーの巡回許可・拒否(Allow/Disallow)ルールやサイトマップURLを設定した正しいrobots.txtを即座に作成できます。
クローラー巡回ルールの設定
生成された robots.txtUTF-8 / text
User-agent: * Allow: / Disallow: /admin/ Disallow: /private/ Disallow: /tmp/ Sitemap: https://example.com/sitemap.xml
