SeonautikBot
SeonautikBot ist der Crawler von seonautik.de. Er ruft eine Website nur auf, wenn jemand für genau diese Domain einen Check angefordert hat, in der Regel der Betreiber selbst.
Verhalten
- User-Agent:
Mozilla/5.0 (compatible; SeonautikBot/1.0; +https://seonautik.de/bot) - Liest zuerst die robots.txt (User-agent: SeonautikBot oder *). Sperrt sie den SeonautikBot für die Startseite, ruft er die Website insgesamt nicht ab, auch nicht im Browser oder mit der Googlebot-Kennung, und es werden keine Inhalte der Website an KI-Dienste übermittelt. Einzelne Unterseiten, die die robots.txt sperrt, ruft er nicht ab.
- Höchstens 2 Anfragen pro Sekunde und Host, maximal 50 Seiten (Pro-Check: 500), Abbruch nach 4 Minuten (Pro-Check: 8 Minuten).
- Lädt keine Bilder, Videos oder Downloads, nur HTML, robots.txt, Sitemaps und Kopfdaten von Bildern.
- Nur im bezahlten Report und nur, wenn die robots.txt die Startseite nicht sperrt: Startseite und Kontaktseite werden zusätzlich einmal in einem normalen Browser geöffnet, ohne einem Cookie-Banner zuzustimmen, um zu messen, was vor der Einwilligung lädt. Dabei läuft das JavaScript der Seite, und der Browser meldet sich mit einem üblichen Chrome-Kennzeichen, weil viele Consent-Tools erkannte Bots automatisch freischalten. Diese Aufrufe können als zwei Besuche in Ihrer Statistik erscheinen; Bilder, Videos und Schriftdateien werden dabei nicht heruntergeladen.
- Nur im bezahlten Report und nur, wenn die robots.txt die Startseite nicht sperrt: Die Startseite und bis zu zwei verdächtige Sitemap-URLs werden zusätzlich mit einem User-Agent abgerufen, der das Wort „Googlebot“ enthält und sich weiterhin als SeonautikBot zu erkennen gibt (
… Googlebot/2.1 … SeonautikBot/1.0 … Cloaking-Test). Gehackte Websites zeigen ihre Spam-Seiten oft nur Google; der Vergleich deckt das auf. - Speichert Inhalte nur so lange, wie sie für den Report gebraucht werden.
Blockieren
User-agent: SeonautikBot Disallow: /
Fragen oder Beschwerden: hallo@seonautik.de