Price-comparison crawler for Belgian DIY retailers. Obeys robots.txt, one request at a time, links back to the shop.
- Categoría
- Operador
- RenoPal
- AccesoIndica quién controla la actividad del bot. Los bots con acceso «directo» están controlados directamente por su operador, mientras que los bots con acceso «intermediario» pueden ser controlados por usuarios finales.
- Directo
- Documentación
- https://renopal.be/bot
- URL del agente de firmasMás información...
- https://renopal.be/.well-known/http-message-signatures-directory