Evaluación y Análisis

# Todos las arañas tienen acceso a todo el directorio (preferible no especificar carpetas comprometidas)
User-agent: *
Disallow:

# Los robots han de esperar 30 segundos entre cada petición (no afecta a todos los robots, pero si a los principales: MSNBot, Slurp i Googlebot)
Crawl-delay: 30

# Permitir trabajar a los buscadores de 0 am a 6 am (horario GMT). Como Madrid es GMT+2, a efectos de España será de las 2 am a 8 am
Visit-time: 0000-0600 

# Ayuda para encontrar el sitemap

La clasificación global de Semrush para combustiblespeinador.es es 0 . combustiblespeinador.es tiene un valor estimado de US$830 según los ingresos publicitarios estimados. combustiblespeinador.es es accedido por aproximadamente 95 usuarios únicos cada día. Su servidor web está ubicado en Spain y tiene una dirección IP de 82.223.244.27. SiteAdvisor dice que es seguro acceder a combustiblespeinador.es.

HTTP/1.1 301 Moved Permanently
Content-Length: 158
Content-Type: text/html; charset=UTF-8
Location: http://www.combustiblespeinador.es/
Server: Microsoft-IIS/8.5
X-Frame-Options: SAMEORIGIN
Date: Thu, 24 Feb 2022 09:26:02 GMT

HTTP/1.1 200 OK
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Content-Length: 0
Content-Type: text/html; charset=UTF-8
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Vary: Accept-Encoding
Server: Microsoft-IIS/8.5
X-Powered-By: PHP/5.6.40
Set-Cookie: idiomacombpeinador=0; expires=Sat, 26-Mar-2022 09:26:02 GMT; Max-Age=2592000; path=/
Set-Cookie: PHPSESSID=5g06fo4m9afsfrg5i2ime6ft05; path=/; HttpOnly
Set-Cookie: combpeinador_LeyCookiesOK_0=0; path=/
X-Frame-Options: SAMEORIGIN
Date: Thu, 24 Feb 2022 09:26:03 GMT