Cubixio GMB's crawler: reads public websites in and about West Africa for media research. Obeys robots.txt.
Идентичность
Как этот бот идентифицирует себя и что делает с контентом
Уровень доступа
Прямой
Обращается к источникам напрямую, под собственным идентификатором
Использование контента
Полное
Сохраняется и повторно используется, например, для обучения моделей или индекса
Пользовательский агент
Mozilla/5.0 (compatible; cbxmonitor/1.0; +https://cubixio.org/bot)
Трафик
Запросы от этого бота в сети Cloudflare