Price-comparison crawler for Belgian DIY retailers. Obeys robots.txt, one request at a time, links back to the shop.
- Categoria
- Operador
- RenoPal
- AcessoIndica quem controla a atividade do bot. Os bots com acesso «direto» são controlados diretamente pelo seu operador, enquanto os bots com acesso «intermediário» podem ser controlados pelos utilizadores finais.
- Direto
- Documentação
- https://renopal.be/bot
- URL do agente de assinaturaMais informações...
- https://renopal.be/.well-known/http-message-signatures-directory