/ / Verwenden Sie `robots.txt` in einer mehrsprachigen Site - seo, sitemap, robots.txt

Verwenden Sie `robots.txt` in einer mehrsprachigen Site - SEO, Sitemap, robots.txt

Sie müssen eine mehrsprachige Website verwalten, auf der Benutzer zu einer lokalen Version der Website umgeleitet werden, z

myBurger.com/en // for users from US, UK, etc..
myBurger.com/fr // for users from France, Swiss, etc...

Wie soll das organisiert werden robots.txt Datei paarweise mit der Sitemap?

myBurger.com/robots.txt // with - Sitemap: http://myBurger.com/??/sitemap
OR
myBurger.com/en/robots.txt  // with - Sitemap: http://myBurger.com/en/sitemap
myBurger.com/fr/robots.txt  // with - Sitemap: http://myBurger.com/fr/sitemap

das wissen en und fr Websites sind in der Tat unabhängige Entitäten, die keinen gemeinsamen Inhalt haben, selbst wenn sie ähnlich aussehen.

Antworten:

2 für die Antwort № 1

Sie müssen eine robots.txt auf die oberste Ebene setzen.

Die Datei "robots.txt" muss sich im obersten Verzeichnis des Hosts befinden. zugänglich über das entsprechende Protokoll und die entsprechende Portnummer.

https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt


0 für die Antwort № 2

Lege das robots.txt an der Wurzel: myBurger.com/robots.txt und registrieren Sie Ihre Sitemaps in der robots.txt Datei mit dem sitemap: Direktive (siehe Beispiel I pflegen wenn erforderlich).