abcgazetesi.com
robots.txt

Robots Exclusion Standard data for abcgazetesi.com

Resource Scan

Scan Details

Site Domain abcgazetesi.com
Base Domain abcgazetesi.com
Scan Status Ok
Last Scan2024-11-10T01:20:44+00:00
Next Scan 2024-11-17T01:20:44+00:00

Last Scan

Scanned2024-11-10T01:20:44+00:00
URL https://abcgazetesi.com/robots.txt
Domain IPs 104.21.42.138, 172.67.206.29, 2606:4700:3030::ac43:ce1d, 2606:4700:3037::6815:2a8a
Response IP 104.21.42.138
Found Yes
Hash d45c65cb6e446e12e950f6ef6b832aa1b4da0d7fb0c5d7328110d98835d16b31
SimHash 670d4e55e6b5

Groups

*

Rule Path Comment
Disallow /private/ Özel içerikleri engelleme
Disallow /restricted/ Kısıtlanmış içerikleri engelleme
Disallow /admin/ Yönetim paneli ve benzeri içerikleri engelleme
Allow / Genel olarak tüm içeriklere izin verme

Other Records

Field Value
sitemap https://abcgazetesi.com/sitemap.xsd

Comments

  • Kullanılabilirse sitemap tanımlama