Новый сайт отлично индексируется последнюю неделю, быстробот даже есть! Никогда такого не видел, чтобы записи через 5-10 минут уже были в индексе, после поста добавлял саму запись в твиттер и G+
Страницы растут как грибы под дождем! Ссылочное конечно штормит, но я и не закупался нигде=ручное размещение)
Ух, наконец, Яшка раздуплился и новый сайт более активно начал индексировать! Было 75 страниц в индексе а стало 750, страниц на сайте конечно намного больше но всё же радует тенденция)
siv1987: "Правильные заголовки" большое влияние на принцип работы директив роботс не оказывают. А в ФАК говорится, что по умолчанию в конце подразумевается любое количество символов. Т.е. в регулярном представление
Disallow: /folder/ соответствует /folder/.*
Disallow: /folder/$ соответствует /folder/$
Disallow: /folder/*.html соответсвует /folder/.*\.html.*
Disallow: /*/folder/ соответсвует /.*/folder/.*
Новый сайт отлично индексируется последнюю неделю, быстробот даже есть! Никогда такого не видел, чтобы записи через 5-10 минут уже были в индексе, после поста добавлял саму запись в твиттер и G+
Страницы растут как грибы под дождем! Ссылочное конечно штормит, но я и не закупался нигде=ручное размещение)
Ух, наконец, Яшка раздуплился и новый сайт более активно начал индексировать! Было 75 страниц в индексе а стало 750, страниц на сайте конечно намного больше но всё же радует тенденция)
Уже неделю сайт новый никак в индекс не может войти, хоть и купил пару ссылок, сохранена только морда за 30 число(
А если все ссылки делать через свой сайт, то есть редиректом, то буду ли я вес передовать чужим сайтам?!
alex20120, и только из-за имени хотите себе приключений найти на 5-ю точку? Всё работает на вас или у вас и бюджет есть?! Глупо это! ИМХО
А так, то там только редирект и поможет, но ещё раз спросите оно вам надо, если старый уже в ТОПЕ?!
"Правильные заголовки" большое влияние на принцип работы директив роботс не оказывают. А в ФАК говорится, что по умолчанию в конце подразумевается любое количество символов. Т.е. в регулярном представление
Disallow: /folder/ соответствует /folder/.*
Disallow: /folder/$ соответствует /folder/$
Disallow: /folder/*.html соответсвует /folder/.*\.html.*
Disallow: /*/folder/ соответсвует /.*/folder/.*
В гугле как и в яндексе есть валидатор роботс
Благодарю всех за ответы, нашел способ просто удалить эти страницы, теперь и закрывать нечего)
В общем, посмотрим, что гугл скажет когда новый роботс увидит...
Я наверное неправильно выразился(( Каюсь
Есть страница: site.ru/news/part/ я её хочу закрыть, но когда я прописал в роботсе
Disallow: /news/part/
То закрыл записи типа: site.ru/news/part/aaaa
---------- Добавлено 01.12.2012 в 01:18 ----------
А что для ПС страница site.ru/news/part/ и страница site.ru/news/part это 2 разные? я думал одна...
1. ты был неправ, у тебя там слеша в конце нет (в 1 посте)
2. будет, так как $
3. самописный движок и хтмл для роботса очень важные данные
Смотря как закрыть.
а слэш реально так все меняет оказывается?
ух, тупанул, чуть 70 процентов сайта не закрыл...
Sharero-Demian, если у Вас правильно отдаются ответы, то закрыв страницу /news/part, у Вас не должен закрыться раздел.
а гугл вебмастер говорит другое...
Disallow: /news/part/$
фух, значит я был прав))
тогда же страница site.ru/news/part/ababa будет доступна для индекса? сайт на самописном движке, а не хтмл
---------- Добавлено 01.12.2012 в 00:46 ----------
Sharero-Demian, у вас категория вот эта /news/part/ ???
да, там просто вылазит страница пустая только блоки висят, из-за движка так...