無料オンラインRobots.txtテスター
robots.txtが特定のパスへのクローラーアクセスを許可または禁止するか確認します。
Paste your robots.txt content below, then optionally test a path against a user-agent.
Who uses the Robots.txtテスター?
- デプロイ前に robots.txt のドラフトを貼り付けて、変更が重要なページを誤ってブロックしていないか確認する SEO スペシャリスト。
- CMS が生成した robots.txt が検索エンジンによるコンテンツのクロールを許可していることを確認する開発者。
- Disallow ルールの一致を確認することで、特定のページが Google の検索結果に表示されない理由をトラブルシューティングするサイト所有者。
How the Robots.txtテスター works
robots.txt のコンテンツをテキストエリアに貼り付けます——ライブ URL 取得機能はないため、まずファイルの生のコンテンツをコピーしてください。
テストする URL パス（例：/admin/login）をパスフィールドに入力します。
シミュレートするユーザーエージェント（例：Googlebot、Bingbot、またはすべてのクローラー用の *）を自由入力のエージェントフィールドに入力します——空欄の場合はデフォルトで * になります。
Test Path をクリックすると、Google の最長一致優先ルールを使用して、そのパスが許可されているか禁止されているかが表示されます。
Tips & tricks
- ライブ URL 取得機能もバッチモードもありません——robots.txt のコンテンツを手動で貼り付けて、一度に1つのパスをテストしてください。
- user-agent フィールドはドロップダウンではなく自由入力です——シミュレートしたいエージェント名を正確に入力するか（例：Googlebot）、ワイルドカード * のために空欄のままにしてください。
- このツールは Bing の最初の一致優先ではなく、Google の最長一致優先を適用します——重複する Allow/Disallow ルールについては、結果が Bing の実際の動作と異なる場合があります。
- robots.txt 内の Sitemap: 行は解析され、ルールの合計数と検出されたユーザーエージェントとともに概要パネルに表示されます。
Frequently Asked Questions
robots.txt のコンテンツを貼り付ける代わりに、サイトの URL を入力できますか？
いいえ——このツールは直接貼り付けられたテキストのみを解析します。robots.txt の URL にアクセスし、そのコンテンツをコピーしてテキストエリアに貼り付けてください。
robots.txt テスターはどのように機能しますか？
テスターは貼り付けられた robots.txt コンテンツを解析し、入力したユーザーエージェントに適用されるルールを特定し、最長一致ルールを使用してそのパスをこれらのルールに照らして評価し、Allowed または Disallowed を返します。
Allow ルールと Disallow ルールの優先順位はどうなっていますか？
Google は最も具体的なルール（最も長く一致するパス）を使用し、これはこのツールが実装している方法です。例：Disallow: /private/ と Allow: /private/public/ ——/private/public/page に対しては、より具体的であるため Allow ルールが優先されます。Bing は代わりに最初に一致したルールを使用しますが、このツールはそれを再現しません。
複数の URL パスを一度にテストできますか？
いいえ——バッチテストモードはありません。パスフィールドを変更して Test Path を再度クリックすることで、一度に1つのパスをテストしてください。
Disallow ルールは、URL が検索結果に表示されるのを防ぎますか？
必ずしもそうではありません。URL を禁止すると Googlebot がそれをクロールするのを防ぎますが、他のサイトがそれにリンクしている場合、Google は限られた情報でそれをインデックスすることがあります。インデックスを完全に防ぐには、ページ自体に meta robots noindex タグを使用してください。
Is my data safe when using the Robots.txtテスター?
Completely safe. The Robots.txtテスター processes everything locally in your browser. No input data, results, or usage information is ever transmitted to or stored on any server.
How current is the data returned by the Robots.txtテスター?
The Robots.txtテスター fetches live data in real time each time you run it. Results reflect the current state of the server or domain at the moment of the request.
Why does the Robots.txtテスター sometimes return different results than other tools?
Results depend on the real-time state of the target server and DNS propagation, which can vary by geographic region and caching TTL. If you see inconsistencies, wait a few minutes and re-test — DNS changes can take up to 48 hours to propagate fully worldwide.