/ / Mit robots.txt die seltsame Indizierung in Joomla stoppen - joomla, web-crawler, robots.txt

Verwenden Sie robots.txt, um die seltsame Indizierung in Joomla zu stoppen - joomla, web-crawler, robots.txt

Ich benutze Joomla und habe einige wirklich gesehenseltsame Linkvariationen werden indiziert. Ich habe es ziemlich gründlich untersucht und habe die Ursache noch nicht gefunden, aber es scheint, mit Kategorienamen und IDs verwandt zu sein.

Unabhängig davon versuche ich, das Problem zu umgehenDas Problem ist, dass ich trotz meiner Bemühungen anscheinend keine geeignete Verbotsregel erstellen kann. Ich habe unzählige Variationen ausprobiert und jedes Mal, wenn der Google robots.txt-Tester mir mitteilt, dass die URL immer noch "erlaubt" ist.

Ein Beispiel für einen der Kategorienamen und IDs ist: 64-Service-Bereich

Ich finde diese bestimmte Kategorie und ID in allen Arten von URLs wie dieser: / standorte / north-dakota / 64-service-area / hawaii / 64-news

Hat jemand Ratschläge, wie ich URLs mit 64-Service-Bereich gezielt sperren kann?

Antworten:

0 für die Antwort № 1

Bing und Google erlauben Wildcards *? (von https://youtu.be/G29Zt-UH_Ko).

Du könntest es versuchen:

disallow: /locations/north-dakota/64-service-area/*