Ограничений в файле robots.txt в Google, в чем причина?
Новая тема Написать ответ
# Чт Июл 04, 2013 5:50 pmjusava1982 Зарег.: 20.12.2012 ; Сообщ.: 162Ответить с цитатой
Мой сайт не индексируется в Google, система выдает ошибку "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.".

Содержимое моего файла robots.txt :

User-agent: Yandex
Disallow:
HOST: vipremont.at.ua

User-agent: *
Disallow:


В может быть чем причина?
# Чт Июл 04, 2013 6:44 pmEdwardSn Зарег.: 22.11.2009 ; Сообщ.: 985Ответить с цитатой
Ну так очевидно, что командой User-agent: * Disallow: запрещено индексирование всего сайта
# Чт Июл 04, 2013 6:50 pmYabuti Зарег.: 28.11.2008 ; Сообщ.: 16263Ответить с цитатой
jusava1982, удали все из robots.txt, если нужно какие-то папки закрыть от индексации, укажи только:

User-agent: *
Disallow: \folder\
# Чт Июл 11, 2013 2:20 amxmod Зарег.: 26.12.2012 ; Сообщ.: 28Ответить с цитатой
EdwardSn писал(а):
Ну так очевидно, что командой User-agent: * Disallow: запрещено индексирование всего сайта



User-agent: *
Disallow: /
Всем роботам доступ закрыт

User-agent: *
Disallow:
Всем роботам доступ открыт

http://www.robotstxt.org/robotstxt.html


Yabuti писал(а):
jusava1982, удали все из robots.txt, если нужно какие-то папки закрыть от индексации, укажи только:

User-agent: *
Disallow: \folder\



Слеши прямые , а не обратные
User-agent: *
Disallow: /folder/

Удивляюсь, что людей с таким статусом нужно корректировать по таким вопросам
# Чт Июл 11, 2013 10:21 amYabuti Зарег.: 28.11.2008 ; Сообщ.: 16263Ответить с цитатой
xmod, :oldher:
И на старуху бывает проруха, я их постоянно путаю.
# Чт Июл 11, 2013 10:34 amLonger Зарег.: 09.10.2007 ; Сообщ.: 2782Ответить с цитатой
xmod писал(а):


Удивляюсь, что людей с таким статусом нужно корректировать по таким вопросам



:baaa: Красавец.

Домен же на юкозе, давно карантин сняли?
Если да - была ли переиндексация после этого?
Прогони домен по популярным блог платформам, чтобы быстро бота завлечь, но эти ошибки бывает долго-долго чистят. Добавь домен в GWT и проверь вручную есть ли ошибки сканирования и доступа.
Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ
 
Любое использование материалов, размещенных на ArmadaBoard.com, без разрешения владельцев ArmadaBoard.com запрещено.