Configuración del servidor

Detecta de antemano errores en robots.txt que podrían bloquear el rastreo por accidente, y genera archivos .htpasswd para la autenticación básica. Ideal para comprobar la configuración antes de aplicarla en el servidor real.