ricerca.repubblica.it
robots.txt

Robots Exclusion Standard data for ricerca.repubblica.it

Resource Scan

Scan Details

Site Domain ricerca.repubblica.it
Base Domain repubblica.it
Scan Status Ok
Last Scan2024-05-04T01:58:49+00:00
Next Scan 2024-05-11T01:58:49+00:00

Last Scan

Scanned2024-05-04T01:58:49+00:00
URL https://ricerca.repubblica.it/robots.txt
Domain IPs 3.163.24.101, 3.163.24.30, 3.163.24.6, 3.163.24.73
Response IP 18.165.171.29
Found Yes
Hash b5370aef0240c7d8a7b6107ad50d73457cc0b99a130a65a927f31e6561528ab9
SimHash 2a3a796ae2b3

Groups

*

Rule Path
Disallow /repubblica/topic/persone/m/massimiliano%2Bsermoneta
Disallow /repubblica/topic/persone/f/francesca%2Blana
Disallow /repubblica/topic/persone/e/enrico%2Bcrasso
Disallow /repubblica/archivio/repubblica/2014/10/07/diecimila-euro-sottratti-al-condominio-amministratore-condannatoGenova06.html
Disallow /repubblica/archivio/repubblica/2007/10/27/investimenti-rischio-mediatori-sotto-processo.html
Disallow /repubblica/archivio/repubblica/2003/10/22/spaccio-di-ecstasy-cocaina-pene-durissime-23.html
Disallow /repubblica/archivio/repubblica/2003/01/17/fabbricava-bancarotte-arrestato-un-bolognese.html
Disallow /repubblica/archivio/repubblica/2001/07/19/rifornivano-le-discoteche-della-regione-cinque-insospettabili.html
Disallow /repubblica/archivio/repubblica/2000/01/02/follia-dopo-il-brindisi-uccide-la-madre.html
Disallow /repubblica/archivio/repubblica/1995/03/29/mani-pulite-entra-in-sacrestia-nel-mirino.html
Disallow /news/14187
Disallow /https%3A//ricerca.repubblica.it/repubblica/archivio/repubblica/1997/12/15/locatelli-le-mani-in-pasta.html
Disallow /db-startup/db/startup?
Disallow /db-startup/db/round?
Disallow /%2B/repubblica/archivio/repubblica/2003/06/05/due-medici-tre-biologi-truffe-in-camice.html
Disallow /

gptbot

Rule Path
Disallow /

anthropic-ai

Rule Path
Disallow /

ccbot

Rule Path
Disallow /

google-extended

Rule Path
Disallow /

facebookbot

Rule Path
Disallow /

omgilibot

Rule Path
Disallow /

cohere-ai

Rule Path
Disallow /

chatgpt-user

Rule Path
Disallow /