Яндекс игнорирует роботс!!! Проверено!!!

мое мнение, не красиво обмениваться линками и запрещать к индексации страницу с линками...

по теме: возможно страница была проиндексирована раньше добавления файла Robots.txt... И еще вопрос, если страница запрещена к индексации файлом Robots.txt, но ее вносят вручную в Яндекс через yandex.ru/addurl.html, будет ли такая страница проиндексирована? Может тут именно такой случай?

Это не то, чтобы некрасиво, таких #$$% надо излавливать и $%^&ить 😡

Скорее первое. Но возможно и второе (давно не пробовал).

Вопервых про отток ПР все говорят и я не хочу чтобы он уплывал!

Robots был добавлен еще до того как было подана заявка на регистрацию!

Что самое смешное, запрещение страницы в роботс очень вероятно не меняет ничего - ПР все так же уходит на запрещенную страницу. :) Это легко проверить - поисковики умеют находить запрещенные страницы по ссылкам, т.е. ссылки на них учитываются.

ну значит скорее всего страница была ручками добавлена в Яндекс кем-то из тех, с кем ты обменялся линками. Или же робот зашел на страницу по ответному линку от них. Я встречал иногда случаи, что линк на меня был установлен не на главную а на страницу линков, можно где-то и не уследить такие простановки.

Мёрзни, мёрзни, волчий хвост! (с) Утекай, утекай, ПР! Это уже параноя! И я искренне рад, что такие вещи не проходят таким умникам, и поисковики ходят по таким ссылкам!!!

у меня есть проект такой же тематики...

неприятно что среди вебмастеров попадаются такие...

на самом деле через апдейт Яндекс такие страницы удаляет из индекса ... то есть париться тут не стоит ...

я давно наблюдаю за проиндексированными тут и как они пропадают ;-))

User-agent: *

Disallow: admin.php

Disallow: /logomusik-down.html

Disallow: /logomusik-upload.html

Disallow: /logomusik-links.html

А какая разница между admin.php и /admin.php ?

reagan, упс ошибочка