Я ни на что не намекаю, я ведь не знаю адрес сайта и какие url'ы у страниц, знал бы, сказал бы больше.
Естественно :) Она и не запрещена!
Я обратил внимание ТС на его ошибку в robots'е. Эта ошибка скажется только в том случае, если адреса страниц у сайт имеют вид: site.ru/wp-content/uploads/страница, потому что правило Disallow: /wp-content/ их запрещает, несмотря на то что ниже прописано правило их разрешающее Allow: /wp-content/uploads/ (в данном случае оно не работает!)
Если у сайта нет таких адресов, то все в порядке :)
Правильно.
А в будущем можете спрашивать здесь.
После того как Вы прописали правило Disallow: /wp-content/, правило Allow: /wp-content/uploads/ уже не будет работать. Для того, чтобы оно работало нужно его прописать перед первым правилом или первое правило переписать как Disallow: /wp-content/$ (это уже как Вам нужнее).
Проверка Вашего robots.txt здесь это подтверждает.
Попробуйте загрузить сами robots с сайта и проверьте Ваши страницы там.
Можно тогда другой вопрос: чем это проще, чем прописать Disallow: /*PHPSESSID ?
Или чем это лучше, или в каких случаях так удобнее?
Просто не встречал еще примеров, где обычным "Disallow" нельзя справиться.
Именно он сегодня и не работал :) Правда всего около 5-7 минут.
Я же говорил, что я спорил с Вами из-за той фразы, а не из-за Ваших слов о зеркалах.
Давайте уже просыпайтесь! :) Хорошего Вам дня!
Крантец :D
Вы бы хоть зашли по своей ссылке сначала.
Разговор-то не об этом, понятно, что они склеятся потом.
Я спорю по поводу этой Вашей фразы:
Я себе не противоречу...
Мне повезло, я даже нашел такой сайт :)
страница index.html закрыта в robots'e, она(!) не в индексе, но морда в индексе.
Достаточно хороший для Вас пример?
Мы все тут знакомы хоть как-нибудь с веб-строительством, чтобы понять, что это и есть главная страница. Но это для нас она такая, а для робота она имеет другой url и это для него другая страница. Для него даже с www и без www - разные страницы (до тех пор пока не склеит).
