Log In Sign Up

vandal.com
robots.txt

Robots Exclusion Standard data for vandal.com

Resource Scan

Scan Details

Site Domain vandal.com
Base Domain vandal.com
Scan Status Ok
Last Scan2024-11-05T04:57:45+00:00
Next Scan 2024-11-12T04:57:45+00:00

Last Scan

Scanned2024-11-05T04:57:45+00:00
URL https://vandal.com/robots.txt
Redirect https://vandal.elespanol.com/robots.txt
Redirect Domain vandal.elespanol.com
Redirect Base elespanol.com
Domain IPs 178.162.140.132
Redirect IPs 23.50.94.39
Response IP 23.50.94.39
Found Yes
Hash d720475df5d8a7749abd29f212b106871c3b78e052aa62f3458dcbed4cd8ee10
SimHash 718903678933

Groups

*

Rule Path Comment
Disallow /blogs/ OK
Disallow /usuarios/ OK
Disallow /cgi-bin/coleccionjuegos.pl OK
Disallow /cgi-bin/iframefnac.pl OK
Disallow /cgi-bin/veramigos.pl OK
Disallow /cgi-bin/verusuario.pl OK
Disallow /comunidad/ OK
Disallow /comunidad/usuarios/*/amigos OK
Disallow /cgi-bin/verrelacion.pl OK
Disallow /cgi-bin/vermensajesusuario.pl OK Desindexado
Disallow /comunidad/usuarios/*/mensajes OK Desindexado
Disallow /cgi-bin/veresperados.pl no esta desindexado
Disallow /comunidad/usuarios/*/esperados OK Desindexado
Disallow /cgi-bin/verpuntuacionusuario.pl no esta desindexado
Disallow /cgi-bin/verpuntuacionusuario2.pl no esta desindexado
Disallow /comunidad/usuarios/*/coleccion no esta desindexado
Disallow /cgi-bin/verhitsusuario.pl Desindexado
Disallow /cgi-bin/verusuariomercadillo.pl falta desindexar
Disallow /cgi-bin/vercomentariosusuario.pl falta desindexar
Disallow /cgi-bin/vervaloracionusuario.pl falta desindexar
Disallow /cgi-bin/verlogrosusuario.pl falta desindexar
Disallow /cgi-bin/avisos_config.pl falta desindexar
Disallow /comunidad/usuarios/*/logros falta desindexar
Disallow /comunidad/usuarios/*/videos falta desindexar
Disallow /comunidad/usuarios/*/mercadillo falta desindexar
Disallow /comunidad/usuarios/*/top-comentarios falta desindexar
Disallow /comunidad/usuarios/*/opiniones falta desindexar
Disallow /comunidad/usuarios/*/valoracion falta desindexar
Disallow /foro/cgi-bin/foro.cgi?accion=opciones_subscripcion_foro -
Disallow /foro/cgi-bin/foro.cgi?accion=form_nuevaencuesta&foro -
Disallow /foro/cgi-bin/foro.cgi?accion=form_nuevomensaje&foro -
Disallow /foro/cgi-bin/foro.cgi?accion=form_replica& -
Disallow /foro/cgi-bin/foro.cgi?accion=busca -
Disallow /foro/cgi-bin/foro.cgi?accion=avisarmoderador -
Disallow /foro/cgi-bin/foro.cgi?mensaje= -
Disallow /foro/cgi-bin/foro.cgi?accion=respuestas -
Disallow /foro/cgi-bin/foro.cgi?accion=estadisticas -
Disallow /foro/cgi-bin/foro.cgi?accion=puntuar -
Disallow /foro/cgi-bin/foro.cgi?accion=leermensaje -
Disallow /expectacion/ -
Disallow /puntuaciones/ -
Disallow /opiniones/ -
Disallow /comunidad/ps2/ -
Disallow /comunidad/gcn/ -
Disallow /comunidad/xbox/ -
Disallow /comunidad/gba/ -
Disallow /comunidad/pc/ -
Disallow /comunidad/psx/ -
Disallow /comunidad/n64/ -
Disallow /comunidad/dc/ -
Disallow /comunidad/psp/ -
Disallow /comunidad/nds/ -
Disallow /comunidad/ng/ -
Disallow /comunidad/x360/ -
Disallow /comunidad/ps3/ -
Disallow /comunidad/wii/ -
Disallow /comunidad/3ds/ -
Disallow /comunidad/iphone/ -
Disallow /comunidad/psvita/ -
Disallow /comunidad/wiiu/ -
Disallow /comunidad/android/ -
Disallow /comunidad/ps4/ -
Disallow /comunidad/xbone/ -
Disallow /comunidad/switch/ ok
Disallow /comunidad/usuarios/*/xboxlive -
Disallow /comunidad/usuarios/*/psn -
Disallow /comunidad/usuarios/*/steam -
Disallow /psnetwork/ps4/ -
Disallow /psnetwork/ps3/ -
Disallow /psnetwork/psvita/ -
Disallow /xboxlive/x360/ -
Disallow /xboxlive/xbone/ -
Disallow /steam/pc/ -
Disallow /videos-comunidad/ -
Disallow /cgi-bin/videoxml.cgi -
Disallow /busqueda/ -
Allow /busqueda/nintendo-switch -
Allow /busqueda/skylanders -
Allow /busqueda/niantic -
Disallow /b/ -
Disallow /ware/b/ -
Disallow /ware/galerias/ -
Disallow /ware/tags/ -
Disallow /esports/b/ -
Disallow /esports/competiciones/ -
Disallow /esports/equipos/ -
Disallow /esports/jugadores/ -
Disallow /esports/resultados/ -
Disallow /esports/autores/ -
Disallow /esports/galerias/ -
Disallow /esports/tags/ -
Disallow /random/b/ -
Disallow /random/tags/ -
Disallow /random/galerias/ -
Disallow /imagenes/1 -
Disallow /imagenes/2 -
Disallow /imagenes/4 -
Disallow /imagenes/5 -
Disallow /imagenes/6 -
Disallow /imagenes/7 -
Disallow /imagenes/8 -
Disallow /imagenes/9 -
Disallow /noticia/*/*/%27 Solucionar error de urls
Disallow /noticia/*/*/A Solucionar error de urls
Disallow /noticia/*/*/B Solucionar error de urls
Disallow /noticia/*/*/C Solucionar error de urls
Disallow /noticia/*/*/D Solucionar error de urls
Disallow /noticia/*/*/E Solucionar error de urls
Disallow /noticia/*/*/F Solucionar error de urls
Disallow /noticia/*/*/G Solucionar error de urls
Disallow /noticia/*/*/H Solucionar error de urls
Disallow /noticia/*/*/I Solucionar error de urls
Disallow /noticia/*/*/J Solucionar error de urls
Disallow /noticia/*/*/K Solucionar error de urls
Disallow /noticia/*/*/L Solucionar error de urls
Disallow /noticia/*/*/M Solucionar error de urls
Disallow /noticia/*/*/N Solucionar error de urls
Disallow /noticia/*/*/O Solucionar error de urls
Disallow /noticia/*/*/P Solucionar error de urls
Disallow /noticia/*/*/Q Solucionar error de urls
Disallow /noticia/*/*/R Solucionar error de urls
Disallow /noticia/*/*/S Solucionar error de urls
Disallow /noticia/*/*/T Solucionar error de urls
Disallow /noticia/*/*/U Solucionar error de urls
Disallow /noticia/*/*/V Solucionar error de urls
Disallow /noticia/*/*/W Solucionar error de urls
Disallow /noticia/*/*/X Solucionar error de urls
Disallow /noticia/*/*/Y Solucionar error de urls
Disallow /noticia/*/*/Z Solucionar error de urls
Disallow /compania/scalar problema de scalar
Disallow /cgi-bin/ajax_comprar -
Disallow /cgi-bin/ajax_encuesta -
Disallow /cgi-bin/comentarios_xml -
Disallow /k1 -
Disallow /k2 -
Disallow /k3 -
Disallow /k4 -
Disallow /k5 -
Disallow /k6 -
Disallow /k7 -
Disallow /k8 -
Disallow /k9 -
Disallow /s1 -
Disallow /s2 -
Disallow /s3 -
Disallow /s4 -
Disallow /s5 -
Disallow /s6 -
Disallow /s7 -
Disallow /s8 -
Disallow /s9 -
Disallow /f1 -
Disallow /f2 -
Disallow /f3 -
Disallow /f4 -
Disallow /f5 -
Disallow /f6 -
Disallow /f7 -
Disallow /f8 -
Disallow /f9 -
Disallow /q1 -
Disallow /q2 -
Disallow /q3 -
Disallow /q4 -
Disallow /q5 -
Disallow /q6 -
Disallow /q7 -
Disallow /q8 -
Disallow /q9 -
Disallow /figuras -
Disallow /veroferta -
Disallow /caratulas -
Disallow /cgi-bin/ajax_registrar_visita.cgi -
Disallow /saladepeligro/?s -
Disallow /foro/mensaje/ -
Disallow /foros/ -
Disallow /encuestas/ -
Disallow /eventos/ -

scrapy

Rule Path
Disallow /

dotbot

Rule Path
Disallow /

grapeshot

Rule Path
Allow /
Back to top

Other Records

Field Value
sitemap https://vandal.elespanol.com/noticias2.xml
sitemap https://vandal.elespanol.com/sitemapvandal/guias.xml
Back to top

Comments

  • Disallow: /iframevideo/ #OK
  • Autores
  • Disallow: /autor/
  • Disallow: /ware/autores/
  • Disallow: /esports/autores/
  • Disallow: /random/autores/
  • Disallow imagenes concretas de los juegos
  • Disallow: /imagenes/*/*/*/*_
  • Disallow: /imagenes/*/*/*/prejuego
  • Disallow: /imagenes/*/*/*/rejuego
  • Disallow: /imagenes/*/*/*/not
  • Disallow categorias de fichas de usuarios
  • Disallow imagenes de las noticias
  • Disallow: /eventos/*/verjuego
  • lecturas raras
  • Sala de peligro bloqueos
  • 28/9/2021
  • User-agent: Screaming Frog SEO Spider
  • Disallow: /
Back to top