設置ミスを防ぐ雛形
robots.txt無料作成ツール（業種テンプレート付き）
サイト種別を選ぶだけで、クロール制御とサイトマップ指定を含むrobots.txtをブラウザ内で作成します。
ブラウザ内で完結設置用ファイルを作れる
サイト種別に応じた基本のDisallow
サイトマップURLの記載
設置前に確認したい注意点
無料ツールを実行
クロール制限をかけず、サイトマップの場所だけを案内します。
生成されたrobots.txt
User-agent: *
Disallow:
robots.txtはドメイン直下（例：https://example.jp/robots.txt）へ設置します。設置後はrobots・sitemapチェッカーで、対象ページがクロール可能かを必ず確認してください。
使い方
3ステップで診断完了
- STEP 1
サイト種別を選択
一般サイト、WordPress、ECサイト、公開前サイトから、運用に近いものを選びます。
- STEP 2
サイトマップURLを入力
サイトマップの場所を記載すると、検索エンジンがURLを見つけやすくなります。
- STEP 3
ルート直下へ設置
生成したテキストをrobots.txtとして保存し、ドメイン直下へ設置してから内容を確認します。
診断結果の正しい読み方
robots.txtはクロールを制御するものであり、検索結果からの削除を保証しません。インデックスさせたくないページはクロールを許可したうえでnoindexを使用してください。生成後は必ずrobots・sitemapチェッカーで動作を確認してください。
よくある質問
robots.txtは必ず設置すべきですか？＋
必須ではありません。制限が不要ならなくても問題ありませんが、サイトマップの場所を案内する目的で設置する価値はあります。
Disallow: / を設定するとどうなりますか？＋
サイト全体のクロールが停止します。公開サイトへ誤って設定すると検索流入が失われるため、公開前サイト以外では使用しないでください。
robots.txtで検索結果から消せますか？＋
消せるとは限りません。クロールを止めても、外部リンク経由でURLだけが認識される場合があります。確実に除外したい場合はnoindexを使用してください。
生成したファイルはどこへ置きますか？＋
https://example.jp/robots.txt のように、ドメイン直下へ設置します。サブディレクトリに置いても認識されません。
完全無料・即時スタート・データ自動連携
結果を自動保存して、店舗集客を増やす。
Loceraアカウントを作成すると、指定URLや全店舗のMEO/SEO順位・口コミ・分析データを毎日全自動追跡できます。
全店舗のMEO・SEO順位を毎日自動計測競合店舗の口コミ・評価変化を一覧追跡
無料で試してみる（1分）クレジットカード登録不要・1分で開始できます