/ / O que significa este robots.txt? Não permite robôs? - seo, robots.txt

O que esse robots.txt significa? Não permite robôs? - seo, robots.txt

User-agent: *
Disallow:
Disallow: /admin
Disallow: /admin
Sitemap: http://www.myadress.com/ext/sm/Sitemap_114.xml

Eu encontrei este arquivo robots.txt em uma das pastas raiz do meu site. Eu não sei se eu fiz ou quem.

Eu acho que este arquivo não permite que qualquer robô para a pasta de administração. Isso é bom.

Mas eu me pergunto se isso bloqueia todos os robôs para todos os arquivos no meu site?

Eu mudei com este arquivo:

User-agent: *
Disallow: /admin
Allow: /
Sitemap: http://www.myadress.com/ext/sm/Sitemap_114.xml

ps: este site não está recebendo nenhum índice por um longo tempo. foi o antigo problema de arquivo?

Respostas:

1 para resposta № 1

O script antigo, além da entrada duplicada / Admin, estava correto. Não há um comando Allow: e um "Disallow:" vazio abre o site para os robôs.

http://www.free-seo-news.com/all-about-robots-txt.htm

Especificamente, verifique o item 7 em "Coisas que você deve evitar" e o item 1 em "Dicas e truques".


1 para resposta № 2

Possivelmente. Eu li seu arquivo antigo da mesma maneira que você fez - esse root estava sendo proibido. De qualquer maneira, o seu novo arquivo de robôs está configurado como eu espero que você o queira.