Monthly crawl of a few public pages per online store to record its platform and tools. Obeys robots.txt.
Identität
Wie dieser Bot sich identifiziert und was er mit Inhalten macht
Zugriffsebene
Direkt
Erreicht Ursprungsserver direkt unter eigener Identität
Inhaltsnutzung
Referenz
Wird auf die ursprüngliche Quelle zitiert oder verlinkt
Verifizierung
Web Bot-Auth
Signiert seine Anfragen mit HTTP-Nachrichtensignaturen, die Ursprungsserver überprüfen können
Traffic
Anfragen von diesem Bot im Cloudflare-Netzwerk