Betrieb / Bot

Über THAVIQBot

Zuletzt aktualisiert 10. September 2026

THAVIQBot crawlt auf Kundenwunsch für Barrierefreiheitsscans. Sein User-Agent ist THAVIQBot/1.0 (+https://thaviq.com/bot) .

So arbeitet der Crawler

• robots.txt lesen, passende Sperrregeln und crawl-delay beachten.
• Zuerst Sitemaps, sonst HTML-Links derselben Herkunft folgen.
• Gleichzeitigkeit und Anfragen pro Host begrenzen; bei 429/503 zurückfahren.
• Keine Anmeldung oder Umgehung von Zugriffskontrollen.
• Repräsentative Vorlagen prüfen und repräsentierte Seitenzahlen dokumentieren.

Steuerung und Kontakt

Betreiber können robots.txt-Direktiven nutzen. Unerwartete Aktivität mit Hostname, Zeit und Anfrage-ID an bot@thaviq.com melden.