ilfoglio.it
robots.txt

Robots Exclusion Standard data for ilfoglio.it

Resource Scan

Scan Details

Site Domain ilfoglio.it
Base Domain ilfoglio.it
Scan Status Ok
Last Scan2024-06-01T00:51:15+00:00
Next Scan 2024-06-08T00:51:15+00:00

Last Scan

Scanned2024-06-01T00:51:15+00:00
URL https://ilfoglio.it/robots.txt
Redirect https://www.ilfoglio.it/robots.txt
Redirect Domain www.ilfoglio.it
Redirect Base ilfoglio.it
Domain IPs 63.34.42.57
Redirect IPs 104.22.34.118, 104.22.35.118, 172.67.25.158, 2606:4700:10::6816:2276, 2606:4700:10::6816:2376, 2606:4700:10::ac43:199e
Response IP 172.67.25.158
Found Yes
Hash d78b149dc29ae0445f16a25c56b7d824afc8d6da9ec9a181d255e91553389ea4
SimHash 352d38a085bb

Groups

*

Rule Path
Disallow /%21panel/
Disallow /tempcache/
Disallow /webservices/
Disallow /widget/head/login
Disallow /clickhere.jsp
Disallow /sezioni/125/papa-in-america
Disallow /sezioni/135/il-piccolo-principe
Disallow /sezioni/140/comodino-di-annalena
Disallow /sezioni/143/osservatrice-romana
Disallow /sezioni/148/sicilia-di-buttafuoco
Disallow /sezioni/149/sms-di-sdm
Disallow /sezioni/184/quirinale-fisso
Disallow /sezioni/185/grecia-anno-zero
Disallow /sezioni/196/lettere-ad-annalena
Disallow /sezioni/204/per-non-dare-i-numeri
Disallow /sezioni/219/osservatorio-5-stelle
Disallow /sezioni/255/adn-kronos
Disallow /sezioni/268/form-invia-contenuto
Disallow /sezioni/298/abbonamento-prime-1-mese
Disallow /sezioni/300/abbonamento-prime-6-mesi
Disallow /sezioni/301/abbonamento-prime-12-mesi
Disallow /sezioni/306/abbonamento-1-mese-plus
Disallow /sezioni/307/abbonamento-3-mesi-plus
Disallow /sezioni/308/abbonamento-12-mesi-plus
Disallow /sezioni/309/abbonamento-premium-6-mesi
Disallow /sezioni/310/abbonamento-premium-12-mesi
Disallow /sezioni/312/newsletter-fino-a-prova-contraria
Disallow /sezioni/313/abbonamento-premium-gold
Disallow /sezioni/338/wunderblock
Disallow /sezioni/340/test-desk
Disallow /sezioni/341/test-mob
Disallow /sezioni/355/test-banner
Disallow /sezioni/360/video-news
Disallow /sezioni/371/richiedi-la-vignetta-omaggio
Disallow /sezioni/376/test-abbonati
Disallow /sezioni/397/checkout
Disallow /sezioni/398/checkout398
Disallow /sezioni/404/thank-you-page
Disallow /sezioni/406/landing-abbonamenti
Disallow /sezioni/407/return-page-ko
Disallow /sezioni/408/test-banner-home
Disallow /sezioni/412/thank-you-page-offline
Disallow /sezioni/413/thank-you-page-offline-bollettino
Disallow /sezioni/419/digital-edition-ilfoglio-20181019
Disallow /sezioni/420/digital-edition-ilfoglio-20181121
Disallow /sezioni/421/digital-edition-ilfoglio-20181120
Disallow /sezioni/717/test-banner-amp
Disallow /paywall/
Disallow /politica/2019/01/31/news/il-madoff-del-sovranismo-235491/
Disallow /tag/alberto-micalizzi/
Disallow /politica/2017/09/06/news/fenomenologia-di-paolo-maddalena-padre-nobile-dei-complottisti-anti-vax-151141/
Disallow /magazine/2017/04/10/news/trani-procura-piu-pazza-del-mondo-129559/
Disallow /politica/2017/11/03/news/all-star-anti-vax-161209/
Disallow /tag/madoff/
Disallow /adn-kronos/
Disallow /adnkronos/
Disallow /*longformcontent/*

gptbot

Rule Path
Disallow /

Other Records

Field Value
sitemap https://www.ilfoglio.it/sitemap.xml
sitemap https://www.ilfoglio.it/sitemap_news.xml