Как ограничить гугл
На страницу 1, 2  След.
Новая тема Написать ответ
# Пн Июн 26, 2006 4:47 amNipPolosatii Зарег.: 18.06.2006 ; Сообщ.: 6Ответить с цитатой
На один сайт поисковый робот google заходит очень много раз, а сайт на скриптах и сервер падает.
# Пн Июн 26, 2006 11:16 ampir8 Зарег.: 08.04.2006 ; Сообщ.: 261Ответить с цитатой
через .htaccess забань гугл бота
# Пн Июн 26, 2006 12:53 pmВацлав Зарег.: 21.02.2006 ; Сообщ.: 4965Ответить с цитатой
Оптимизируй скрипты, уменьши динамику, нарости мощность сервера.
Боту гугла радоваться надо, а не банить его Smile
# Пн Июн 26, 2006 2:55 pmRabbit Зарег.: 01.08.2005 ; Сообщ.: 19787Ответить с цитатой
Цитата:

Боту гугла радоваться надо, а не банить его


ага, ага!

я не очень сильна в вопросах работы сервера, может быть это с хостером как-то обсудить? или с автором скриптов?
# Вт Июн 27, 2006 1:44 ampir8 Зарег.: 08.04.2006 ; Сообщ.: 261Ответить с цитатой
иногда все же его стоит банить
# Вт Июн 27, 2006 3:23 amMax Зарег.: 22.09.2005 ; Сообщ.: 3327Ответить с цитатой
имхо надо попробывать скрипты оптимизировать, а сколько раз он заходит если не секрет?
# Вт Июн 27, 2006 2:59 pmLi-Hua Зарег.: 25.12.2005 ; Сообщ.: 11544Ответить с цитатой
забанить гуглбота это грех :D
# Ср Июн 28, 2006 4:48 pmIseeDeadPeople Зарег.: 06.12.2005 ; Сообщ.: 21230Ответить с цитатой
я фигею..
"NipPolosatii"
знаешь сколько всяких еще ботов под видом обычных юзеров ходят, типа спам боты или боты ищющие ящики... или всякие статистические..
причем есть много криво написаныых, т.е. пока он все базу свою незабьет одними твоими линка он непоймет что уже как 2 дня на один и тот же скрипт ссылаеться...
ребята тут что то нето..
# Ср Июн 28, 2006 10:50 pmirvean Зарег.: 08.10.2005 ; Сообщ.: 1896Ответить с цитатой
Цитата:

забанить гуглбота это грех


Однозначно r5
Кого угодно только не гугла.

Хотя тут можно черпнуть много полезной инормации о google _http://www.google.com.ua/support/webmasters/
Может там найдёшь ответ, насколько я помню гугля даёт возможность управлять роботом через robots.txt Wink
# Чт Июн 29, 2006 3:52 pmpir8 Зарег.: 08.04.2006 ; Сообщ.: 261Ответить с цитатой
только вяло он подчиняется этому robots.txt что-то :hmm:
# Пт Июн 30, 2006 12:50 amirvean Зарег.: 08.10.2005 ; Сообщ.: 1896Ответить с цитатой
Цитата:

только вяло он подчиняется этому robots.txt что-то

Да практиковал, вроде запрещённое для индексации не трогает, в закрытые через robots.txt каталоги не лазит... Что мешает запретить всё ? Wink
# Пт Июн 30, 2006 1:29 amRabbit Зарег.: 01.08.2005 ; Сообщ.: 19787Ответить с цитатой
Цитата:

только вяло он подчиняется этому robots.txt что-то


да, тоже читала что индексирует все подряд и в том числе то что закрыто в robots.txt :hmm:
# Пт Июн 30, 2006 8:44 ambrush Зарег.: 29.09.2005 ; Сообщ.: 2572Ответить с цитатой
а вы уверены, что это гугл?
он откуда ходит?
к нам вот ходит googlebot из китая - я вот думаю, что это ненастоящий гуглебот Smile
# Пт Июн 30, 2006 2:58 pmIseeDeadPeople Зарег.: 06.12.2005 ; Сообщ.: 21230Ответить с цитатой
где то был топик -- то что у гугл бота ИП 69.*....
если меня память неподводит..
# Пт Июн 30, 2006 10:29 pmpir8 Зарег.: 08.04.2006 ; Сообщ.: 261Ответить с цитатой
http://www.seriousrevenue.com/wiki/google-ip/ вот тут более точный список
Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ
 На страницу 1, 2  След.
Любое использование материалов, размещенных на ArmadaBoard.com, без разрешения владельцев ArmadaBoard.com запрещено.