サーバー設定

robots.txtの記述ミスによる意図しないクロールブロックを事前に発見したり、Basic認証用の.htpasswdファイルを生成したりできます。サーバー設定を反映する前の確認用途に適しています。

robots.txt チェッカー

robots.txt の内容を貼り付けて構文チェック。User-agent・Disal...

.htpasswd ファイル生成

Apache・Nginx の Basic 認証で使用する .htpasswd ファイルをブ...