val.superdeporte.es
robots.txt

Robots Exclusion Standard data for val.superdeporte.es

Resource Scan

Scan Details

Site Domain val.superdeporte.es
Base Domain superdeporte.es
Scan Status Failed
Failure StageFetching resource.
Failure ReasonServer returned a client error.
Last Scan2024-04-12T12:28:42+00:00
Next Scan 2024-07-11T12:28:42+00:00

Last Successful Scan

Scanned2023-02-24T17:03:14+00:00
URL http://val.superdeporte.es/robots.txt
Domain IPs 199.232.194.133, 199.232.198.133
Response IP 213.0.95.35
Found Yes
Hash c4db5f82849f35ce8f5f474344d9e888395f90bb55380ac557f9b457ba6fce19
SimHash 78fc9c05fd84

Groups

twitterbot

Rule Path
Allow /especiales/

*

Rule Path
Allow /
Disallow /servicios/galeriasMultimedia/fotoAmpliada.jsp
Disallow /servicios/contacte/
Disallow /servicios/corporativo/
Disallow /servicios/publicidad/
Disallow /servicios/visor/
Disallow /old10006/
Disallow /servicios/videosZoomin/
Disallow /guapisimas/
Disallow /apuestas/
Disallow /especiales/urdangarin/
Disallow /especiales/sucesion-papa/
Disallow /especiales/caso-barcenas/
Disallow /especiales/motogp/
Disallow /especiales/renta-2012/
Disallow /especiales/turismo/
Disallow /especiales/tour-francia/
Disallow /especiales/vuelta-espana/
Disallow /especiales/esqui/
Disallow /especiales/declaracion-renta/
Disallow /especiales/coche-del-anyo/
Disallow /especiales/aniversario-muro-berlin/
Disallow /especiales/formacion/
Disallow /blogs/ver-partido*
Disallow /blogs/ver-deportes*
Disallow /secciones/noticia.jsp
Disallow /default.jsp
Disallow /includes/votNotDinFich.jsp
Disallow /elementosWeb/css/default.jsp
Disallow /secciones/seccion.jsp
Disallow /buscar/default.jsp
Disallow /deportes/futbol/reclamos/css/noticia.jsp
Disallow /servicios/participacion/almacenar_comentario.jsp
Disallow /secciones/portada/general.jsp
Disallow /servicios/participacion/votarComentario.jsp
Disallow /servicios/buscador/resultados.jsp
Disallow /servicios/contacte/rEnvioMail.jsp
Disallow /encuestas/
Disallow /concursos/
Disallow /en-las-redes/
Disallow /el-rincon-de-los-suenos/
Disallow */lidia-bedman*
Allow /blogs-lectores/$
Disallow /blogs-lectores?*

Other Records

Field Value
sitemap /sitemap.xml
sitemap /sitemapNews.xml