Cubixio GMB's crawler: reads public websites in and about West Africa for media research. Obeys robots.txt.
Tożsamość
Jak ten bot się identyfikuje i co robi z treściami
Poziom dostępu
Bezpośredni
Dociera bezpośrednio do źródeł, pod własną tożsamością
Wykorzystanie treści
Pełny
Zatrzymywane i ponownie wykorzystywane, np. do trenowania modeli lub indeksu
Agent użytkownika
Mozilla/5.0 (compatible; cbxmonitor/1.0; +https://cubixio.org/bot)
Ruch
Żądania z tego bota w sieci Cloudflare