robots.txt テンプレ
robots.txt生成(Allow/Disallowを選んでテンプレ作成)
Allow / Disallow を選んで robots.txt テンプレをすぐ作成。robots.txt 生成とクローラー ブロック 設定をまとめて行えます。
目的はクロール制御です。順位上昇を保証するものではありません。
入力内容はブラウザ内で処理されます。
robots.txtテンプレ生成ツール
そのまま robots.txt として使えます。テンプレの用途(プリセット)
用途に近いテンプレから始めると最短です。
Sitemap 行の追加
複数行OK。Sitemap: 行を自動で出力します。
生成結果プレビュー
そのまま robots.txt として使えます。
オプション
高度な設定
必要な人だけ
robots.txtの使い方
Allow/Disallowを追加
User-agent を選び、ルールを追加します。
Sitemapを入力(任意)
サイトマップURLを複数行で追加できます。
コピーして設置
生成結果をコピーして /robots.txt に保存します。
例
安全なデフォルト
すべて許可し、Sitemap を追加します。
User-agent: * Disallow: Sitemap: https://example.com/sitemap.xml
管理画面をブロック
管理画面だけを Disallow します。
User-agent: * Disallow: /admin/
ステージング全ブロック
開発環境向けの危険設定です。
User-agent: * Disallow: /
robots.txtでできること
- • robots.txt は「クロール制御」のためのファイルです。
- • インデックス制御は別で、noindex などが必要なケースがあります。
設置場所
https://example.com/robots.txt
よくある質問(FAQ)
これでSEOが上がる?
robots.txtの目的はクローラーの制御であり、順位上昇を保証するものではありません。不要なクロールを減らしてサーバー負荷を抑えたり、クロールさせたくない領域を明確にするために使います。
Disallow: / は危険?
危険です。Disallow: / はサイト全体をブロックする指定です。本番サイトに適用すると、重大な影響が出る可能性があります。このツールでは該当設定を検知すると強い警告を表示し、コピー時にも確認を求めます。
sitemapの行も入れられる?
入れられます。Sitemap入力欄にURLを追加すると、Sitemap: ... 行を自動で出力します(複数URLにも対応)。