ersatzteil-onlineshop24.de
robots.txt
Robots Exclusion Standard data for ersatzteil-onlineshop24.de
Resource Scan
Scan Details
| Site Domain | ersatzteil-onlineshop24.de |
| Base Domain | ersatzteil-onlineshop24.de |
| Scan Status | Ok |
| Last Scan | 2024-10-31T11:09:23+00:00 |
| Next Scan | 2024-11-30T11:09:23+00:00 |
Last Scan
| Scanned | 2024-10-31T11:09:23+00:00 |
| URL | https://ersatzteil-onlineshop24.de/robots.txt |
| Redirect | https://www.ersatzteil-onlineshop24.de/robots.txt |
| Redirect Domain | www.ersatzteil-onlineshop24.de |
| Redirect Base | ersatzteil-onlineshop24.de |
| Domain IPs | 185.28.158.161 |
| Redirect IPs | 185.28.158.161 |
| Response IP | 185.28.158.161 |
| Found | Yes |
| Hash | fa48a89b917bf6afd998311fd404216cd1692c9c879a949dea596141d638e6e3 |
| SimHash | 02c05f700393 |
Groups
*
| Rule | Path |
|---|---|
| Disallow | /images/ |
| Disallow | /artikel_details.pl |
| Disallow | /suche_erg.pl |
| Disallow | /artikel_grp.pl |
| Disallow | /geraetesuche.pl |
| Disallow | /geraetesuche_ng_if.pl |
| Disallow | /suche_ger2.pl |
| Allow | /Ersatzteile-eos--Geraeteuebersicht.html |
| Allow | /Geraete~~Ersatzteiluebersicht.html |
| Disallow | /ersatzteile |
| Disallow | /ersatzteilsortiment |
| Disallow | /ersatzteilassistent |
googlebot
| Rule | Path |
|---|---|
| Disallow | /images/ |
| Disallow | /artikel_details.pl |
| Disallow | /suche_erg.pl |
| Disallow | /artikel_grp.pl |
| Disallow | /geraetesuche.pl |
| Disallow | /geraetesuche_ng_if.pl |
| Disallow | /suche_ger2.pl |
| Allow | /Ersatzteile-eos--Geraeteuebersicht.html |
| Allow | /Geraete~~Ersatzteiluebersicht.html |
| Allow | /impressum.pl |
| Allow | /ersatzteile |
| Allow | /ersatzteilsortiment |
| Allow | /ersatzteilassistent |
msnbot
| Rule | Path |
|---|---|
| Disallow | /images/ |
| Disallow | /artikel_details.pl |
| Disallow | /suche_erg.pl |
| Disallow | /artikel_grp.pl |
| Disallow | /geraetesuche.pl |
| Disallow | /geraetesuche_ng_if.pl |
| Disallow | /suche_ger2.pl |
| Allow | /Ersatzteile-eos--Geraeteuebersicht.html |
| Allow | /Geraete~~Ersatzteiluebersicht.html |
| Disallow | /ersatzteile |
| Disallow | /ersatzteilsortiment |
| Disallow | /ersatzteilassistent |
Other Records
| Field | Value |
|---|---|
| crawl-delay | 10 |
twengabot-2.0
| Rule | Path |
|---|---|
| Disallow | /images/ |
| Disallow | /artikel_details.pl |
| Disallow | /suche_erg.pl |
| Disallow | /artikel_grp.pl |
| Disallow | /geraetesuche.pl |
| Disallow | /geraetesuche_ng_if.pl |
| Disallow | /suche_ger2.pl |
| Allow | /Ersatzteile-eos--Geraeteuebersicht.html |
| Allow | /Geraete~~Ersatzteiluebersicht.html |
| Disallow | /ersatzteile |
| Disallow | /ersatzteilsortiment |
| Disallow | /ersatzteilassistent |
Other Records
| Field | Value |
|---|---|
| crawl-delay | 10 |
bingbot
| Rule | Path |
|---|---|
| Disallow | /images/ |
| Disallow | /artikel_details.pl |
| Disallow | /suche_erg.pl |
| Disallow | /artikel_grp.pl |
| Disallow | /geraetesuche.pl |
| Disallow | /geraetesuche_ng_if.pl |
| Disallow | /suche_ger2.pl |
| Allow | /Ersatzteile-eos--Geraeteuebersicht.html |
| Allow | /Geraete~~Ersatzteiluebersicht.html |
| Disallow | /ersatzteile |
| Disallow | /ersatzteilsortiment |
| Disallow | /ersatzteilassistent |
Other Records
| Field | Value |
|---|---|
| crawl-delay | 10 |
Other Records
| Field | Value |
|---|---|
| sitemap | https://www.ersatzteil-onlineshop24.de/sitemap.xml.gz |
Warnings
- 14 invalid lines.
Comments