Log In Sign Up

preitv.es
robots.txt

Robots Exclusion Standard data for preitv.es

Resource Scan

Scan Details

Site Domain preitv.es
Base Domain preitv.es
Scan Status Ok
Last Scan2025-10-26T13:43:56+00:00
Next Scan 2025-11-02T13:43:56+00:00

Last Scan

Scanned2025-10-26T13:43:56+00:00
URL https://preitv.es/robots.txt
Domain IPs 104.21.2.107, 172.67.129.24, 2606:4700:3033::ac43:8118, 2606:4700:3037::6815:26b
Response IP 104.21.2.107
Found Yes
Hash 16d9845d4cbbca0467952fb0e11d084d1b55465f2d8d2006b4cb8565c251668d
SimHash 0950cd174572

Groups

mediapartners-google

Rule Path
Allow /

*

Rule Path
Allow /wp-content/uploads/
Disallow /wp-
Disallow /search/
Allow /*.js$
Allow /*.css$
Disallow */?
Disallow /search/
Disallow /*paged
Disallow /*?
Disallow /*.php$
Disallow /*.inc$
Disallow /cgi-bin/
Disallow /stats/
Disallow /logs/
Disallow /archives/
Disallow /author/
Disallow /feed*/
Disallow /trackback*/
Disallow /attachment*/
Back to top

Other Records

Field Value
sitemap http://www.preitv.com.es/sitemap_index.xml
sitemap http://www.preitv.com.es/sitemap-image.xml
sitemap http://www.preitv.com.es/sitemap-video.xml
Back to top

Comments

  • Ponemos todos los sitemaps
  • Dejamos al robot de publicidad de google que entre hasta la cocina para evitar problemas con la publicidad en paginaciones, búsquedas, etc
  • Desindexamos todo lo que empiece por wp- a excepción de la carpeta uploads
  • Desindexamos cualquier archivo que lleve la extensión .php .inc
  • Desindexamos carpetas de logs, estadísticas y scripts
  • Desindexamos posibles páginas con contenido duplicado o que no nos interesan, entre ellas los archivos, los comentarios y las páginas de autor.
  • Desindexamos los feeds, trackbacks y attachments
Back to top