/ / Какво означава този robots.txt? Не позволява ли роботи? - сео, robots.txt

Какво означава това robots.txt? Не позволява ли роботи? - сео, robots.txt

User-agent: *
Disallow:
Disallow: /admin
Disallow: /admin
Sitemap: http://www.myadress.com/ext/sm/Sitemap_114.xml

Аз открих този файл robots.txt в една от главните папки на моя сайт. Не знам, че съм го направил или кой.

Мисля, че този файл не позволява на роботите да администрират папката. Това е добре.

Но аз се чудя дали това блокира всички роботи на всички файлове в уебсайта ми?

Аз го промених с този файл:

User-agent: *
Disallow: /admin
Allow: /
Sitemap: http://www.myadress.com/ext/sm/Sitemap_114.xml

PS: този уеб сайт не получава никакъв индекс за дълго време. е стария проблем с файла?

Отговори:

1 за отговор № 1

Старият скрипт, различен от дублирания / администраторския запис, беше правилен. Няма команда Позволи: и празно "Disallow:" отваря сайта до роботи.

http://www.free-seo-news.com/all-about-robots-txt.htm

По-конкретно, проверете елемент # 7 в "Неща, които трябва да избягвате" и # 1 под "Съвети и трикове"


1 за отговор № 2

Възможно е. Четох стария си файл по същия начин - този корен е бил забранен. Така или иначе вашият нов файл за роботи е настроен как очаквам, че го искате.