cbxmonitor

Cubixio GMB

Cubixio GMB's crawler: reads public websites in and about West Africa for media research. Obeys robots.txt.

Идентичность

Как этот бот идентифицирует себя и что делает с контентом

Уровень доступа

Прямой

Обращается к источникам напрямую, под собственным идентификатором

Использование контента

Полное

Сохраняется и повторно используется, например, для обучения моделей или индекса

Пользовательский агент

  • Mozilla/5.0 (compatible; cbxmonitor/1.0; +https://cubixio.org/bot)

Трафик

Запросы от этого бота в сети Cloudflare

HTTP трафик от cbxmonitor

HTTP-запросы от указанного бота за выбранный период времени

Узнать больше...