|
|
|
|
|
Есть сайт, вот что отображает яшка
Страниц в поиске 307
Внешних ссылок на страницы сайта 458
Дата последнего посещения сайта роботом 11.07.2011
Загружено роботом 796
Исключено роботом 21
на самом деле на сайте 420 страниц. Я так понимаю что сумма страниц в поиске и исключенных роботом должна давать общее количество страниц на сайте? |
|
|
|
|
|
| "По мнению" робота на сайте 796 страниц (какой движок?), из них робот допустил к индексации 307 страниц. Для того, чтобы избежать увеличения количества мусорных страниц из-за особенностей движков, нужно изначально запрещать их к индексации при помощи файла robots.txt |
|
|
|
|
|
движок жумла,
вот параметры робот txt
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/ |
|
|
|
|
|
| Вроде бы robots верный. Наверное, на остальных страницах % уникального текста маленький. Или это очередной заеб Яши. |
|
|
|
|
|
| Всем привет..У меня блог в ЖЖ выпал из индекса, в яндекс.вебмастер написано загружено роботом 40 страниц а в поиске 0..Что делать? Как решить эту проблему?Я так понимаю это бан??? |
|
|
|
|
|
|
