Стоит ли прописывать оба этих варианта? Или ограничиться только со слешем. На сайте все урлы прописаны со слешем но поисковик мало ли где найдет упоминания без слеша.........
Добрый линкер: а у меня ситуация другая, был сделан сайт (без всякой оптимизации), выложен в инете и оставлен на пару месяцев. Пока учился оптимизировать в офф лайне (то есть тайтлы и тд прописывал) Яндекс проиндексил 42 страницы. на сайт нет ни одной ссылки.
Ну так...... Такая же песня. Выложил каталог сайтов на 20000 страниц. Разместил на него одну внешнюю ссылку. За неделю Яндекс скушал 16000. При этом урл прописал заглавными буквами и больше за 3 месяца на сайт не заходил :)
Moose: В разделе "внешние ссылки" cтало невозможно просмотреть беклинки с Yahoo.., хотя с остальных поисковиков все отлично показывает. Это у меня только такой глюк?
Уже двойной баян.
Уже 2 раза обсуждалов и Разработчки уже неделю обещают "глянуть" есть или нет глюк.
BeerDrinker: Купил чел плазму за 50.000, через год она не будет стоить ничего. Вы думаете бытовая техника не дешевет со временем?
1 час в неделю посмотреть Дискавери.
Итого, этот просмотр обходится ~1000 руб за час. Эта цифра для самой НЕДОРОГОЙ плазмы. Чем TV дороже, тем эта цифра будет выше.
Ок. Договорились
Значит ровно через 12 месяцев я смогу пойти и бесплатно взять у Вас плазму?
Не отдадите ? Так она же ничего не стоит?
Я живу сегоднешним днем и хочу что бы "здесь и сейчас" мой ребенок смотрел качественную картинку и не портил себе глаза!
Сколько юудет она стоит через год мне совершенно фиолетово.
Методом эксперементов было определено что яндекс не всегда воспринимает строку
User-agent: *
если ниже находится
User-agent: Yandex
Возможно уже "баян"
А если так?
Хост прописан
Но ведь Как я уже сказал Яндекс считает
Разными совершенно урлами.
Ваш пример от моего первичного отличается только добавлением хоста, а он у меня прописан просто я на этом не акцентировал внимания
ЗЫ Кажется Яндекс совсем сломали :( Ввожу http://www.yandex.ru/cgi-bin/test-robots?host=www.****.ru
И пишет что ничего не запрещено
А у меня там
То есть без слеша на конце
Стоит ли прописывать оба этих варианта? Или ограничиться только со слешем. На сайте все урлы прописаны со слешем но поисковик мало ли где найдет упоминания без слеша.........
User-agent: *
Disallow: /usercp/
Disallow: /register/
Disallow: /login/
Disallow: /search/
В данном случае, должно быть только (!!!) без слеша:
закрываем и для http://www.****.ru/login/ и для http://www.****.ru/login
Disallow: /login
Не смотря на все советы опубликованные тут столкнулся с проблеМММой
Яндекекс скушал www.всетут.ru/admin/ до того как она была зактыта robots.txt
Сейчас по советам все папки установлены без завершающего слеша
Disallow: /admin
Решил ее удалить вручную в яндексе
Добавляю там www.всетут.ru/admin/ (удалить весь каталог) А мне яндекс пишет что не может ее удалить так как она не запрещена к индексации
Убираю слешь и он пишет что удалит через некоторое время.
Значит получается директивы
Disallow: /admin
Disallow: /admin/
Все же разные и певая строка не запрезает индексацию урла со слешем а это подразумевает что и /admin/555 тоже будут проиндексированы?
Блин проверил и http://www.всетут.ru/admin/?a=articles спокойно добавился :(
а у меня ситуация другая, был сделан сайт (без всякой оптимизации), выложен в инете и оставлен на пару месяцев. Пока учился оптимизировать в офф лайне (то есть тайтлы и тд прописывал) Яндекс проиндексил 42 страницы. на сайт нет ни одной ссылки.
Ну так...... Такая же песня. Выложил каталог сайтов на 20000 страниц. Разместил на него одну внешнюю ссылку. За неделю Яндекс скушал 16000. При этом урл прописал заглавными буквами и больше за 3 месяца на сайт не заходил :)
dimenty, Очевидно Вы просто не видели баз у товарищей которые писали чуть выше в данном топике. Вот там Впечатляет и качество и цена
Главное правило - Учитесь ждать.
Жирность ссылки не подразумевает что роботы Яндекса индексируют этот сайт круглосуточно
ЗЫ Купил ссылку с сайта с ТИЦ 7300 , так она 40 дней не индексировалась
В разделе "внешние ссылки" cтало невозможно просмотреть беклинки с Yahoo.., хотя с остальных поисковиков все отлично показывает. Это у меня только такой глюк?
Уже двойной баян.
Уже 2 раза обсуждалов и Разработчки уже неделю обещают "глянуть" есть или нет глюк.
Так и не глянули ............ видать ...
Купил чел плазму за 50.000, через год она не будет стоить ничего. Вы думаете бытовая техника не дешевет со временем?
1 час в неделю посмотреть Дискавери.
Итого, этот просмотр обходится ~1000 руб за час. Эта цифра для самой НЕДОРОГОЙ плазмы. Чем TV дороже, тем эта цифра будет выше.
Ок. Договорились
Значит ровно через 12 месяцев я смогу пойти и бесплатно взять у Вас плазму?
Не отдадите ? Так она же ничего не стоит?
Я живу сегоднешним днем и хочу что бы "здесь и сейчас" мой ребенок смотрел качественную картинку и не портил себе глаза!
Сколько юудет она стоит через год мне совершенно фиолетово.
Устареет морально - пойду и куплю новую