/ / Le fichier Drupal robots.txt interdit sera-t-il toujours enregistré dans le fichier journal Apache? - apache, drupal, robots.txt

Le fichier Drupal robots.txt interdire sera-t-il toujours enregistré dans le fichier journal Apache? - apache, drupal, robots.txt

J'ai défini des règles dans le fichier robots.txt pour un agent spécifique de mon site Web Drupal.

J'ai une question. Lorsque cet agent tente d'accéder au site Web, cet accès sera-t-il toujours enregistré dans mon fichier apache access_log?

Réponses:

1 pour la réponse № 1

Disallow dans robots.txt n’empêche techniquement pas les agents utilisateurs d’accéder à votre site Web. Chaque agent utilisateur décide s'il souhaite ou non honorer votre fichier robots.txt.

Par défaut, Drupal ne fait rien avec le contenu de votre fichier robots.txt, et le contenu de celui-ci n'a aucune incidence sur les journaux de votre serveur.