Features
プライバシー重視
すべての生成処理はブラウザ内でローカルに行われます。ルールやサイト情報が保存されることはありません。
インスタントプレビュー
ルールや設定を追加すると、リアルタイムで robots.txt ファイルの更新を確認できます。
100% プロフェッショナル
公式のウェブ標準とプロトコルに従ったSEO最適化済みの robots.txt ファイルを生成します。
FAQ
よくある質問
robots.txt ファイルとは何ですか?
robots.txt は、ウェブマスターがウェブロボット(通常は検索エンジンのロボット)に対して、サイト上のページをどのようにクロールすべきかを指示するために作成するテキストファイルです。
robots.txt ファイルはどこに配置すべきですか?
robots.txt ファイルは、ウェブサイトのルートディレクトリに配置する必要があります(例:https://example.com/robots.txt)。
robots.txt はページを検索結果から完全に削除しますか?
robots.txtは、URLが検索結果に表示されないことを保証しません。インデックス登録を防ぐには、noindexメタタグまたはHTTPヘッダーを使用し、クローラーが指示を読めるようにページのクロールを許可してください。非公開コンテンツは認証で保護してください。