как правильно собирать базы (msn/google)..
На страницу Пред.  1, 2
Новая тема Написать ответ
# Пт Фев 06, 2009 5:28 pmHello_Kitty Зарег.: 30.04.2007 ; Сообщ.: 10763Ответить с цитатой
Цитата:
Вообще, при сборе базы (с гугля) по признакам .. inurl , и неюзаю прокси..
.. а парс делаю через реал/одни ИП. (мой)
Насколько быстро можно схватит "бан" и на сколько часов ?


очень быстро, за пару минут забанят по ИП и на пару часов обычно.
Цитата:
я думаю тема есть четкая форума -
определения время до бана, зависимости от ИП


нет особо четкой формулы, по крайней мере об этом нигде не афишируется.
Цитата:
При (парс делаю через реал/одни ИП. (мой)) во сколько сек сделать паузу меджу запросами ?


2 секунды вроде бы достаточно.
Цитата:
также, СЕ Гугль, может определить, что запросы, к нему .. идут с прокси ? .. и это будет способствовать быстрее блокировке, нежели парс идет с реал/одно ИП.


кажется не может определять. дело именно в частоте и интенсивности запросов с одного ИП.
не важно прокси это или реал ИП.
Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ
 На страницу Пред.  1, 2
Любое использование материалов, размещенных на ArmadaBoard.com, без разрешения владельцев ArmadaBoard.com запрещено.