bibliotecas.madrid.es
robots.txt

Robots Exclusion Standard data for bibliotecas.madrid.es

Resource Scan

Scan Details

Site Domain bibliotecas.madrid.es
Base Domain madrid.es
Scan Status Ok
Last Scan2024-06-14T14:33:55+00:00
Next Scan 2024-06-28T14:33:55+00:00

Last Scan

Scanned2024-06-14T14:33:55+00:00
URL https://bibliotecas.madrid.es/robots.txt
Domain IPs 104.81.138.59, 104.81.138.99, 2600:1413:a000::1734:283a, 2600:1413:a000::1734:284b
Response IP 23.44.4.178
Found Yes
Hash b98868eaa390e6cb3bfd77fb27573b4dc7cd8c335100402c7716b1f866e29502
SimHash 925ff022aad3

Groups

findestars
myonid
peekyou
pipl
rapleaf
snitch
spock
tweepz
wink
yasni
yoname
yourtraces
zoominfo
magpie-crawler
bubing
dotbot
smtbot
ahrefsbot
yandexbot
mj12bot
seamonkey
exabot
baiduspider
semrushbot

Rule Path
Disallow /

*

Rule Path
Disallow /UnidadWeb/Contenidos/Oposiciones/0_DatosPersonales
Disallow /UnidadesDescentralizadas/UDCBOAM
Disallow /UnidadesDescentralizadas/TablonEdictos
Disallow /UnidadesDescentralizadas/Personal
Disallow /UnidadesDescentralizadas/Salud/Personal
Disallow /UnidadesDescentralizadas/AgenciaParaElEmpleo/Ayre/ConcursosLibresdesignaciones
Disallow /UnidadesDescentralizadas/Agla/Intranet/Concursos_LD
Disallow /UnidadesDescentralizadas/UDCAgenciaTributaria/Personas/ConcursosLibresDesignaciones
Disallow /UnidadesDescentralizadas/UDCIAM/Personal/Empleo
Disallow /UnidadesDescentralizadas/UDCUrbanismo/FormulariosOrganosColegiados
Disallow /FicherosDatosPersonales
Disallow /csvfiles
Disallow /FrameWork
Disallow /stage-ranking
Disallow /vgn-ext-templating
Disallow /sites
Disallow /portales/transparencia
Disallow /portales/monumenta
Disallow /portal/site/bibliotecas/menuitem.fad500de140a8186c69e81f4a8a409a0
Disallow /FormExt010

Warnings

  • 1 invalid line.