enoBot
enoBot ist der Crawler des Verzeichnisses eno. Er besucht öffentlich zugängliche Websites von Weinerzeugern, um Stammdaten, Weine und Fotos für das B2B-Verzeichnis zu erfassen.
- User-Agent
enoBot/1.0 (+https://eno.eu/bot)- Rate
- höchstens 1 Anfrage pro Sekunde je Host
- robots.txt
- wird respektiert, auch
Crawl-delay - Kontakt
- b2b@eno.eu
Ausschluss
Um enoBot auszuschließen, genügt ein Eintrag in der robots.txt:
User-agent: enoBot
Disallow: /
Alternativ entfernen wir auf Zuruf per E-Mail jeden Eintrag samt gespiegelter Fotos. Bilder werden nur zur Darstellung des jeweiligen Betriebs gespiegelt; Kontaktdaten werden nicht veröffentlicht.