/ / Verwenden von Pattern zum Blockieren einiger dynamischer URLs in robots.txt - robots.txt, googlebot

Verwenden eines Musters zum Blockieren einiger dynamischer URLs in robots.txt - robots.txt, googlebot

Ich versuche, einen Teil der Seite von der Indizierung auszuschließen. Ich habe ein Suchformular, in dem Sie einige vordefinierte Parameter oder vom Benutzer eingegebene Abfragen verwenden können. Ich muss Suchergebnisse blockieren, für die vom Benutzer Abfragen bereitgestellt wurden.

Beispiel-URLs:

  • example.com?adv=0&query=&r=0&woj=0&msc=&osk=&osb=&osn= # indiziere es!
  • example.com?adv=0&query=&r=0&woj=0&msc=&osk=&osb=&osn= # indiziere es auch!
  • example.com?adv=0&query=**USER_QUERY**&r=0&woj=0&msc=&osk=&osb=&osn= # nicht indexieren!

robots.txt:

User-Agent: *

Disallow: /example.com?adv=0&query=*&r=0&woj=0&msc=&osk=&osb=&osn=

Funktioniert das Sternsymbol wie erwartet? Google wird wissen, dass Sternchen nur mit verlinkt werden soll &query Parameter und wenn dieser Parameter leer ist, sollte die URL indiziert werden?

Antworten:

0 für die Antwort № 1

Bing und Google erlauben Wildcards? * (von https://youtu.be/G29Zt-UH_Ko)