|
|
|
|
|
Мой сайт не индексируется в Google, система выдает ошибку "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.".
Содержимое моего файла robots.txt :
User-agent: Yandex
Disallow:
HOST: vipremont.at.ua
User-agent: *
Disallow:
В может быть чем причина? |
|
|
|
|
|
| Ну так очевидно, что командой User-agent: * Disallow: запрещено индексирование всего сайта |
|
|
|
|
|
jusava1982, удали все из robots.txt, если нужно какие-то папки закрыть от индексации, укажи только:
User-agent: *
Disallow: \folder\ |
|
|
|
|
|
| EdwardSn писал(а): |
|
Ну так очевидно, что командой User-agent: * Disallow: запрещено индексирование всего сайта
|
User-agent: *
Disallow: /
Всем роботам доступ закрыт
User-agent: *
Disallow:
Всем роботам доступ открыт
http://www.robotstxt.org/robotstxt.html
| Yabuti писал(а): |
jusava1982, удали все из robots.txt, если нужно какие-то папки закрыть от индексации, укажи только:
User-agent: *
Disallow: \folder\
|
Слеши прямые , а не обратные
User-agent: *
Disallow: /folder/
Удивляюсь, что людей с таким статусом нужно корректировать по таким вопросам |
|
|
|
|
|
xmod, 
И на старуху бывает проруха, я их постоянно путаю. |
|
|
|
|
|
| xmod писал(а): |
Удивляюсь, что людей с таким статусом нужно корректировать по таким вопросам
|
 Красавец.
Домен же на юкозе, давно карантин сняли?
Если да - была ли переиндексация после этого?
Прогони домен по популярным блог платформам, чтобы быстро бота завлечь, но эти ошибки бывает долго-долго чистят. Добавь домен в GWT и проверь вручную есть ли ошибки сканирования и доступа. |
|
|
|
|
|
|
|
|
