robots.txt テンプレ

robots.txt生成(Allow/Disallowを選んでテンプレ作成)

Allow / Disallow を選んで robots.txt テンプレをすぐ作成。robots.txt 生成とクローラー ブロック 設定をまとめて行えます。

目的はクロール制御です。順位上昇を保証するものではありません。

入力内容はブラウザ内で処理されます。

robots.txtテンプレ生成ツール

そのまま robots.txt として使えます。
テンプレの用途(プリセット)

用途に近いテンプレから始めると最短です。

Sitemap 行の追加

複数行OK。Sitemap: 行を自動で出力します。

生成結果プレビュー

そのまま robots.txt として使えます。

オプション

高度な設定
必要な人だけ

robots.txtの使い方

Allow/Disallowを追加

User-agent を選び、ルールを追加します。

Sitemapを入力(任意)

サイトマップURLを複数行で追加できます。

コピーして設置

生成結果をコピーして /robots.txt に保存します。

安全なデフォルト

すべて許可し、Sitemap を追加します。

User-agent: *
Disallow:

Sitemap: https://example.com/sitemap.xml
管理画面をブロック

管理画面だけを Disallow します。

User-agent: *
Disallow: /admin/
ステージング全ブロック

開発環境向けの危険設定です。

User-agent: *
Disallow: /

robots.txtでできること

  • • robots.txt は「クロール制御」のためのファイルです。
  • • インデックス制御は別で、noindex などが必要なケースがあります。
設置場所 https://example.com/robots.txt

よくある質問(FAQ)

これでSEOが上がる?

robots.txtの目的はクローラーの制御であり、順位上昇を保証するものではありません。不要なクロールを減らしてサーバー負荷を抑えたり、クロールさせたくない領域を明確にするために使います。

Disallow: / は危険?

危険です。Disallow: / はサイト全体をブロックする指定です。本番サイトに適用すると、重大な影響が出る可能性があります。このツールでは該当設定を検知すると強い警告を表示し、コピー時にも確認を求めます。

sitemapの行も入れられる?

入れられます。Sitemap入力欄にURLを追加すると、Sitemap: ... 行を自動で出力します(複数URLにも対応)。

コピーしました