Ну можно в настройки добавить кнопки: "парсить домены", "парсить урлы"
Крут, а почему только домены парсит? Логичнее было бы урлы парсить.
Как по вашему это палится (не с целью потролить, на самом деле любопытно)?
Не разу не встречал корректно настроенный If-Modified-Since для не статичных файлов (типо картинок). Может есть у кого пример?
Для ру сегмента отдельный ru домен, сайты связать при помощи hreflang, которые сейчас понимают Я и Г.
Key Collector
Словоеб
Allsubmitter
Магадан
Key Hunter
МегаЛемма
SEOMart Organizer
YWSCheck
semrush.com
prodvigator.ua
spywords.ru
advse.ru
А вообще, вот хорошая подборка: http://seodevice.ru/podbor-klyuchevyx-slov/
Если вы верите в эту команду, то спарсить все урлы (например через яшколюб) по запросу site:domain.ru, затем спарсить весь список урлов по site:domain.ru/&, через ВПР в экселе получить список "сопливых страниц".
1) Не надо блокировать метки в robots.txt через Disallow
2) Необходимо корректно настроить rel=canonical, чтобы у всех страниц с парамтерами отслеживания в качестве каконического выдавался URL без параметров
3) Дополнительно для яндекса можно прописать Clean-param
4) Дополнительно для гугла можно в google webmasters tools настроить "Параметры URL"
Основное лицемерие в том, что очень сильно ограничено поле для вопроса, т.е. нельзя задать развернутый вопрос, приходится сокращать, в результате у отвечающего появляется возможность перевернуть вопрос так, как ему удобно. С моим вопросом именно так и было, а когда задал в комментах полностью, то и ответа уже по всей видимости не будет.
А можно чуть подробнее о том, как было дело? Правильно ли я понял, что сначало сайт занимал определенные позиции (скажем топ11-30), начали крутить ПФ, сайт обвалился (скажем за топ-50), спросили платона, он ответитл, что накрутка ПФ, перестали крутить, в течении 2х месяцев долбили платона, что мы не крутим, он ответил что все ок, в следующий ап сайт вернулся на прежние позиции (топ11-30), так?
