SEO/マーケティング

robots.txtジェネレーター - クローラールール作成

User-agent、Allow、Disallow、Sitemap を含む基本的な robots.txt を作成します。公開時のクロールポリシー設定に役立ちます。

robots.txtSEOクローラー

このツールをお気に入りに

お気に入りの保存方法がまだ選ばれていません。

クイック操作

このツールの URL をコピーするか、対応端末ではシステムの共有シートを開けます。

利用シーン

  • 新規サイト向けの初期 robots.txt を作成する
  • 管理画面や下書き用パスをクロール対象外にする
  • robots.txt に Sitemap URL を明記する

使い方

  1. User-agent と Allow/Disallow パスを入力する
  2. 必要なら Sitemap URL を追加する
  3. 生成されたテキストをコピーする

入出力サンプル

入力

User-agent: * / Disallow: /admin / Sitemap: https://uuup.net/sitemap.xml

出力

robots.txt テキスト

FAQ

Disallow は複数行指定できますか?

はい。1行に1パスずつ入力すれば、複数の Disallow ルールをまとめて生成できます。

robots.txt はアクセス制御になりますか?

いいえ。robots.txt は行儀の良いクローラー向けの指示であり、認証や権限制御の代わりにはなりません。

ツール

関連ツール

近い用途の翻訳済みツールへ続けて進めます。

Sitemapジェネレーター

sitemap.xmlジェネレーター - URL一覧サイトマップ

利用可能

複数行のURL一覧を基本的な sitemap.xml に変換します。小規模サイトで検索エンジン向けのページ一覧を用意するときに便利です。処理はブラウザ内で完結します。

Sitemap SEO XML

Metaタグジェネレーター

Metaタグジェネレーター - 基本SEOとOpen Graph

利用可能

ページタイトル、説明文、URL、画像URLから、一般的なMetaタグとOpen Graphタグ、さらに基本的なTwitter Cardタグを生成します。ランディングページや記事ページの設定に便利です。

Meta Open Graph SEO