вытащить url-ы страниц из соплей гугле?

82

vigilant

7 сентября 2012, 11:36

542

А как вытащить адреса страниц из соплей, чтобы они были в виде списка? Не руками, а как-нить автоматом бы.

И еще бы автоматом их запихнуть в удалялку..

L

112

lpcard

7 сентября 2012, 12:29

#1

Так на вскидку и не скажешь. Но если не совсем изящно, то можно вытащить список вообще всех страниц сайта, потом вытащить весь список из основной выдачи и методом исключения получить сопли. Например, в Эксель. А в удалялку списком никак не запихнуть. Зато можно в роботс:)

Есть ли сервис для Проверить конкретную страницу на $50 - требуется список

42

marinero

7 сентября 2012, 15:20

#2

Зато можно в роботс

Только очень часто гуглу просто по барабану robots.txt)

Монетизация сайтов с фильмами.Деньги для киносайтов (http://websharks.ru/ref/5220/). Рефералам помогаю с установкой.

82

vigilant

7 сентября 2012, 21:01

#3

Да в том-то и проблема.. Сами же в своих сраных рекомендациях пишут, что роботс - одно из средств удаления из поиска(индекса), а фактически все закрытое в роботсе висит в соплях.. Можно конечно открыть и он типа сам удалит(может быть), но например с уже удаленными тегами неудобно... Закрыты-то по общей маске /tag(

Еще и так просто из выдачи руками не скопипастишь, ссылки-то с редиректом.. Эх

Двойная ссылка на страницу сопли-сопли, 1 конкретный вопрос Как быстро удалить из

139

anchous

7 сентября 2012, 21:58

#4

vigilant:
Сами же в своих сраных рекомендациях пишут, что роботс - одно из средств удаления из поиска(индекса)

надо чуть внимательнее факи читать, там сказано что закрытие в роботсе не гарантирует закрытие от индексации, поэтому гуглеводы настоятельно рекомендуют юзать метатеги

Купить быстрые анонимные прокси в России, Европе и США (http://proxy4seo.net/)

Яндекс проведет прямой эфир с командой стажировок

Новости интернет-рекламы за январь-февраль 2021 года