Googlebot is the search engine crawler for Google Search.
- Kategoria
- Robot indeksujący wyszukiwarki
- Operator
- Żądania HTTP
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Safari/537.36
- robots.txtDowiedz się więcej...
User-Agent: Googlebot/ Disallow: /