Опис веб-сайту не відображається в пошуковій системі Google.
Я написав мета-тег опису всередині тега заголовка.
і файл robots.txt, як показано нижче
User-agent: *
Disallow: /
Коли я шукаю в Google я отримую нижче повідомлення Опис цього результату недоступний через robots.txt цього сайту - дізнайтеся більше.
Відповіді:
2 для відповіді № 1User-agent: *
Disallow: /
Просто видаліть цей рядок, щоб дозволити роботам сканувати ваш сайт або використовувати:
User-agent: *
Disallow:
robots.txt
приклади:
Щоб виключити всіх роботів з усього сервера (що у вас є!)
User-agent: *
Disallow: /
Щоб дозволити всім роботам повний доступ (або просто створити порожній файл "/robots.txt" або взагалі не використовувати один)
User-agent: *
Disallow:
Щоб виключити всіх роботів з частини сервера
User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /junk/
Для виключення одного робота
User-agent: BadBot
Disallow: /
Щоб дозволити одного робота
User-agent: Google
Disallow:
Докладніше про файл robots.txt у http://www.robotstxt.org