robots.txt, 1001 opticiens, TLD fr, www subdomain

Le domaine www.1001opticiens.fr fait partie du top-level-domain "fr".

En termes sémantiques, plusieurs concepts sous-jacents peuvent apparaître dès la lecture du domaine. Notez que ces concepts sont déterminés automatiquement par un algorithme et sans chercher à savoir ce que contient réellement le domaine. La proximité de ces concepts n'est donc qu'indicative.

Voilà une version du fichier robots.txt tel qu'il a pu être récupéré sur ce domaine.

User-Agent: * 
Disallow: /fournisseurs
Crawl-delay : 60

Une erreur s'est produite lors de la récupération du fichier avec le protocole https.

© 2019 www.http-header.com