Über unseren Bot

Diese Seite richtet sich an Betreiber von Websites, die GeoAuditBot besucht hat.

GeoAuditBot gehört zu Torumata (torumata.com), betrieben von Hatteria labs s.r.o. Er auditiert Websites auf Wunsch ihrer Eigentümer oder Verwalter. Wenn er Sie besucht hat, liegt das daran, dass jemand, der angibt, Ihre Website zu verwalten, bei uns ein Audit gestartet hat.

Diese Seite gibt es auch auf Englisch. English

Der Crawler befolgt robots.txt, sendet höchstens 2 Anfragen pro Sekunde an eine Domain und verlängert die Pausen nach Fehlern schrittweise. Er identifiziert sich mit dem User-Agent GeoAuditBot/1.0 und einem Link zurück auf diese Seite.

Eine Ausnahme hat der verifizierte Domaininhaber: In seinen Projekteinstellungen darf er das Ignorieren von robots.txt für seine eigenen Audits aktivieren. Das Ratenlimit, die Verzögerung und die Beschränkung auf die angegebene Domain gelten trotzdem.

Wir befolgen auch die Direktive Crawl-delay: Steht sie in Ihrer robots.txt, crawlen wir so langsam, wie sie es verlangt. Es gilt immer der langsamere Wert; Crawl-delay kann uns nie über zwei Anfragen pro Sekunde hinaus beschleunigen. Die einzige Ausnahme sind unsinnig hohe Werte, etwa eine Anfrage pro Tag: sie vollständig einzuhalten würde länger dauern als das Audit selbst, deshalb kürzen wir die Verzögerung und weisen im Bericht ausdrücklich darauf hin.

Wenn Sie nicht möchten, dass der Crawler Ihre Website besucht, fügen Sie die untenstehende Regel in Ihre robots.txt ein.

Fügen Sie dies in Ihre robots.txt ein:

User-agent: GeoAuditBot
Disallow: /

Wenn Sie Ihre Website prüfen lassen möchten, Ihre robots.txt unseren Crawler aber sperrt, starten wir den Audit nicht; Erreichbarkeit und robots.txt prüfen wir, bevor wir Ihnen etwas berechnen.

Die Sperre kann auch indirekt sein: Eine Regel Disallow: / für User-agent: * gilt auch für uns.

So erlauben Sie uns den Zugriff in der robots.txt:

User-agent: GeoAuditBot
Allow: /

Fragen zum Crawler: support@torumata.com.

Wenn unser Crawler Ihre Website belastet oder sich anders verhält, als diese Seite beschreibt, schreiben Sie an abuse@torumata.com. Beschwerden haben Vorrang.