robots.txt生成ツール

以下の内容で検索およびAIクローラーを拒否するrobots.txtを生成します。

ご利用の際はまず「ご利用に際して」をお読みください。

  • パスはサイトルート(/)からのパスを指定してください
  • 複数のパスを指定する場合は、改行して入力してください
  • 入力欄が空の場合は、Google画像クローラーと各種AIクローラーのみ拒否するrobots.txtを生成します

ご利用に際して

使用ライブラリ

本ツールは、AIクローラーのリストアップに以下のライブラリを使用しています。

ai.robots.txt
https://github.com/ai-robots-txt/ai.robots.txt
Copyright (c) 2024 ai.robots.txt
MIT License: https://github.com/ai-robots-txt/ai.robots.txt/blob/main/LICENSE

不具合報告・お問い合わせについて

本ツールについて、不具合やお問い合わせの際は以下までお願いします

参考ページ

更新履歴