Вылетел сайт из индекса
На страницу 1, 2  След.
Новая тема Написать ответ
# Сб Мар 14, 2009 1:32 amJeHHo Зарег.: 28.11.2008 ; Сообщ.: 59Ответить с цитатой
Пропал в поисковиках google, yandex. До этого возился стем что делал ссылки чпу и добавил роботс.txt
вот собственно роботс может что в нем не так?

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /xmlrpc.php
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
Host: obsuin.ru
Crawl-delay: 5

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /xmlrpc.php
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
Host: obsuin.ru
Sitemap: http://obsuin.ru/sitemap.xml
# Сб Мар 14, 2009 2:03 amOlezhongk Зарег.: 15.02.2009 ; Сообщ.: 649Ответить с цитатой
для чего столько исключений?
# Сб Мар 14, 2009 9:35 amGene Зарег.: 31.08.2008 ; Сообщ.: 456Ответить с цитатой
вот это наверное лишнее:
Код:
Disallow: /*?*
Disallow: /*?



во втром блоке
Код:
Host: obsuin.ru


не имеет смысла
# Сб Мар 14, 2009 2:11 pmJeHHo Зарег.: 28.11.2008 ; Сообщ.: 59Ответить с цитатой
Olezhongk писал(а):
для чего столько исключений?


Для того чтоб дублированного континента не было, да и зачем роботу лазить там, где ему ловить нечего!
# Сб Мар 14, 2009 2:14 pmJeHHo Зарег.: 28.11.2008 ; Сообщ.: 59Ответить с цитатой
Gene писал(а):
вот это наверное лишнее:
Код:
Disallow: /*?*
Disallow: /*?



во втром блоке
Код:
Host: obsuin.ru


не имеет смысла



Сейчас поменяю, если ситуация измениться, то МЕГА РЕСПЕКТИЩЕ Wink
# Сб Мар 14, 2009 6:09 pmhumanbot Зарег.: 05.03.2009 ; Сообщ.: 535Ответить с цитатой
JeHHo, а в вебмастер гугла сайт толкать не пробовали, там инструмент для проверки robots.txt есть неплохой.

после смены динамики на псевдостатику ваши страницы просто выпали из индекса, все (кроме главной) страницы по старым адресам пропали - так их видет поисковик и сайт индексирует заново. На будущее, лучше статику сразу ставить или оставлять динамику. Вскоре все должно вернуться в индекс. Ставьте ссылки на внутряки для лучшей индексации.
# Сб Мар 14, 2009 9:23 pmGene Зарег.: 31.08.2008 ; Сообщ.: 456Ответить с цитатой
JeHHo, если есть sitemap стоит его обновить и пингануть.
# Вс Мар 15, 2009 5:48 pmDK Зарег.: 18.06.2008 ; Сообщ.: 2425Ответить с цитатой
Цитата:
Для того чтоб дублированного континента не было


Smile эт чо за новое понятие?
# Пн Мар 16, 2009 9:11 amHello_Kitty Зарег.: 30.04.2007 ; Сообщ.: 10763Ответить с цитатой
DK, это копия континента, дубликат.
вот например есть континент Африка, а где-то на другой планете есть его дубликат -
например на Юпитере тоже есть Африка. Shout :smk:
# Пн Мар 16, 2009 9:36 amDK Зарег.: 18.06.2008 ; Сообщ.: 2425Ответить с цитатой
Hello_Kitty аа...
не знал что ТС продвигает сразу континентами, это мы ламеры продвигаем странички, надо сразу уж тогда планеты продвигать :smk:
# Пн Мар 16, 2009 10:46 pmOlezhongk Зарег.: 15.02.2009 ; Сообщ.: 649Ответить с цитатой
DK писал(а):
Hello_Kitty аа...
надо сразу уж тогда планеты продвигать :smk:



Оффтоп:
планеты часто банят Sad :mrgreen:

# Чт Мар 19, 2009 2:13 pmJeHHo Зарег.: 28.11.2008 ; Сообщ.: 59Ответить с цитатой
humanbot писал(а):
JeHHo, а в вебмастер гугла сайт толкать не пробовали, там инструмент для проверки robots.txt есть неплохой.


Да пробовал, и гуглу и яши сайтмап отправлял, но результата не видать чето. Уже неделя прошла, а он все еще не появился в индексе Sad

Оффтоп:
Вот возник вопрос!
А если в роботе стоит - Disallow: /category/*/*
А в wordpress чпу стоит как- /%category%/%postname%.html
Может ли это препятствовать индексации сайта?

# Чт Мар 19, 2009 2:29 pmЛена Зарег.: 19.10.2005 ; Сообщ.: 1203Ответить с цитатой
Нет, потому что Disallow: /category/*/* запрещает к индексации урлы типа:
/category/something.html
/category/2you/index.php
и т.д.
А /%category%/%postname%.html в ЧПУ вордпресса делает такие урлы:
/business/investment.html
/corporative/party.html
и т.д. то есть нет написания в урле слова category, есть сразу название категории. Но! При этом сами категории по одиночке (то есть архивы категорий) будут по правилам disallow запрещены к индексации. Например:
/category/business/
/category/corporative/
будут скрываться с помощью disallow.
# Чт Мар 19, 2009 2:49 pmFraud Зарег.: 27.07.2007 ; Сообщ.: 309Ответить с цитатой
Неделя - это очень мало для индексации, вот если месяц - тогда уже надо будет призадуматься Smile .
Файл роботс можно проверять в вебмастер тулс, там будет наглядно видно, что запрещено, а что нет.
Там же можно посмотреть ошибки, возникающие при обращении паука к сайту.
Зачем отдельно создавать точно такое же правило для Яндекса?
Кстати, уверена, что роботс тут ни причем. Из Гугла выкинуло из-за плясок, а из Яндекса большое число сайтов выпало в последнее время и неизвестно вернутся ли они туда.
Другой вариант - если ты поменял вид ссылок, то нельзя говорить, что он вылетел, он еще туда не попал!
# Чт Мар 19, 2009 3:07 pmJeHHo Зарег.: 28.11.2008 ; Сообщ.: 59Ответить с цитатой
Cпс Лена за внятное объяснение!!!

Оффтоп:
то нельзя говорить, что он вылетел, он еще туда не попал! - что правда то правда :smk:

Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ
 На страницу 1, 2  След.
Любое использование материалов, размещенных на ArmadaBoard.com, без разрешения владельцев ArmadaBoard.com запрещено.