Fichier robots.txt

http://marknotes.fr/robots.txt

1. Explication

Ce fichier correspond à une redirection htaccess vers le plugin de tâches robots-txt pour l’obtention du fichier c’est-à-dire à l’URL non SEO http://marknotes.fr/router.php?task=task.robotstxt.get

Le contenu du fichier robots.txt est dynamique càd qu’il est possible d’influencer sur son accès et son contenu grâce au fichier settings.json.

Le modèle utilisé pour le fichier robots.txt est robots.txt.dist qui contient une variable nommée %DOCS% et qui sera remplacée dynamiquement par le nom du dossier où se trouve les notes. Il s’agit de la variable folder du fichier settings.json.

Le modèle peut aussi utiliser la variable %URL% pour faire référence à l’URL du site comme par exemple ici /

Sitemap: %URL%sitemap.xml

2. Configuration

Voir le plugin de type tâche robots-txt pour apprendre comment configurer le plugin qui génère le fichier robots.txt.