# www.robotstxt.org/ # www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156449 User-Agent: * Allow: / Disallow: /cart$ Disallow: /error Disallow: /recherche$ Disallow: /js/concierge.*.js Disallow: *?reviewPage=* Allow: *?reviewPage=1 Allow: *?reviewPage=2 Allow: *?reviewPage=3 Allow: *?reviewPage=4 Allow: *?reviewPage=5 # les bots laissent 5 secs entre chaque requête. (Ignoré par Google, ignoré par tous les bots agressifs) Crawl-delay: 5 Sitemap: https://www.pourdebon.com/flux/sitemap