|
|
|
Как получить список ссылок из выдачи Google по определенному запросу?
я хочу найти все проиндексированные Гуглом страницы моего сайта, но которые не нужны в индексе, например постраничный вывод не нужен в индексе и удалить их используя инструмент удаления страниц в вебмастре Гугла
Все страницы из индекса с постраниченой пагинацией можно получить таким запросом
Код: |
site:site.ru inurl:page
|
А как получить список URL страниц из выдачи? кроме ручного варианта, а то уж слишком много их там
Спасибо |
|
|
|
|
|
Бесплатный вариант - парсер Байрона, запросы вида: "site:site.ru" |
|
|
|
|
|
Народ а мне подскажите заодно, как получить сайты где есть юрл вида /forum/ допустим и пох на домены? |
|
|
|
|
|
JM, запросы, вида: inurl:"/forum/"
Т.к. Гугл выдает ограниченное количество результатов, то можно расширить признаки, перебирая домены:
inurl:"/forum/" site:.com
inurl:"/forum/" site:.net
inurl:"/forum/" site:.org
и т.д.
Дополнительно можно расширить с помощью признаков форумов:
inurl:"/forum/" site:.com "Powered by SMF 1.0"
inurl:"/forum/" site:.com "Powered by SMF 1.1"
inurl:"/forum/" site:.com "Powered by SMF 2.0"
и т.д. |
|
|
|
|
|
|
JM, |
|
|
|
|
|