Information für Webseiten-Betreiber

Sie sind hier gelandet, weil ein automatisierter Abruf Ihrer Webseite mit dem User-Agent website-watch/1.0 erfolgt ist. Auf dieser Seite erklären wir, was unser Crawler tut, und wie Sie ihn steuern oder ausschließen können.

Wer ist HELPTOOL.DE?

HELPTOOL.DE ist ein selbst gehostetes Monitoring-Werkzeug, mit dem unsere Kunden ihre eigenen Webseiten auf unbeabsichtigte Änderungen prüfen lassen (z. B. nach einem Plugin-Update). Wir crawlen keine Webseiten ohne expliziten Auftrag des Webseiten-Inhabers.

Wie verhält sich der Crawler?

• User-Agent: website-watch/1.0 (+https://helptool.de/bot)
• robots.txt: wird respektiert. Disallow-Regeln werden eingehalten, ebenso die Crawl-Delay-Direktive.
• Tiefe und Umfang: standardmäßig Startseite plus zwei Klick-Ebenen, maximal 500 Seiten pro Domain.
• Frequenz: standardmäßig einmal pro Stunde, mindestens jedoch zehn Minuten Abstand zwischen zwei Abrufen derselben Seite.
• Conditional Requests: wir senden ETag- und Last-Modified-Header, sodass unveränderte Seiten mit HTTP 304 beantwortet werden können und kaum Last erzeugen.

Wie kann ich den Crawler ausschließen?

Tragen Sie in Ihrer robots.txt folgenden Eintrag ein:

User-agent: website-watch
Disallow: /

Damit unterbleiben alle Abrufe spätestens beim nächsten Lauf.

Missbrauchsverdacht?

Sollten Sie den Verdacht haben, dass jemand unsere Plattform nutzt, um Ihre Webseite zu beobachten, ohne Ihre Zustimmung zu haben, melden Sie sich bitte unter info@nolte.pro. Wir prüfen jeden Hinweis und schließen Konten bei Missbrauch.

Stand: 2026-05-07