Welcome2: Так я закрою от индексации все такие страницы.. А мне надо, чтобы страницы без "&step=" были в индексе. Пока страниц без этого "&step" даже нет в индеске.
Нет, вы закроете для яндекса только страницы, содержащие &step.
"Звездочка" в коде стоит не случайно :) "Спецсимвол '*' означает любую (в том числе пустую) последовательность символов" (с) Яндекс.Хелп.
User-agent: Yandex
Disallow: /view.html?id=*&step
Т.е. в этом случае НЕ будут запрещены к индексации страницы /view.html?id=1243, а будет запрет только если там появится &step. Hапример, /view.html?id=1243&step - уже не будет индексироваться.
Welcome2: Убрал ненужное "&step=", но яндекс попрежнему индексирует страницы с этим "&step=". Как можно показать яшке, что он не прав и жрать эту "&step=" не надо?
Можно:
1. Пробывать просто через robots.txt запретить индексацию этих страниц.
User-agent: Yandex
Disallow: /view.html?id=*&step
2. Сделать редирект со страниц со step на страницы без step прямо в движке.
3. Сделать редирект со страниц со step с помощью modrewrite.
Secret: Если же просто постоянный location с одной страницы на другую - это не повод для бана, без разницы, с помощью php вы заголовок выдаёте или нет. Но страницы с редиректом, понятно, в выдаче не будет (на ней же текста нет)
То что страницы не будет в выдаче, вы погорячились :) Может быть урл страницы на которой стоит редирект, а все остальное страницы, на которую она ссылается.
Примеры:
1. Запрос вклады домен www.mosoblbank.ru. Страница в серпе стоит вклады, а редирект стоит на вклады. Причем, редирект стоит изначально (разработчики нового движка "постарались"). Т.е. на первом url'е никогда не было страницы, отдающей 200 ОК и содержащей контент.
Я вроде понял. На ваш каталог появляются ссылки, а вы не размещаете поданные сайты в каталог? Скорее всего, ваш каталог попал в базы каталогов и в системы типа 1ps. А те кто прогоняют сайты по каталогам просто ставят весь список обраток, который дает система.
Кроме изменения сайта и структуры ничего больше не делалось? Я имеею в виду прогоны по каталогам, спам на доски объявлений, форумы и т.п., покупка ссылок в большом количестве?
Siron: ...по моему сеарчу в топ 2м стоит сайт...
в третьих - анкоры внешних ссылок на сайт - вообще не имеют в тексте сеарча, вопрос, как такое может быть? :)
1. Могут быть внутренние ссылки с требуемым анкором.
У меня был marketolog.biz, отдал знакомому.
Есть marketolog.info, за него предлагали 150$ полгода назад, но он не продается.
Гуру не видит код движка. Если не охото залазить в дебри кода, пропиши как тебе сказали
Код движка тут не особо и нужен. Я не гуру, следовательно могу ошибаться с кодом правила:
В коде не уверен, и не проверял.
Так я закрою от индексации все такие страницы.. А мне надо, чтобы страницы без "&step=" были в индексе. Пока страниц без этого "&step" даже нет в индеске.
Нет, вы закроете для яндекса только страницы, содержащие &step.
"Звездочка" в коде стоит не случайно :) "Спецсимвол '*' означает любую (в том числе пустую) последовательность символов" (с) Яндекс.Хелп.
Т.е. в этом случае НЕ будут запрещены к индексации страницы /view.html?id=1243, а будет запрет только если там появится &step. Hапример, /view.html?id=1243&step - уже не будет индексироваться.
Убрал ненужное "&step=", но яндекс попрежнему индексирует страницы с этим "&step=". Как можно показать яшке, что он не прав и жрать эту "&step=" не надо?
Можно:
1. Пробывать просто через robots.txt запретить индексацию этих страниц.
2. Сделать редирект со страниц со step на страницы без step прямо в движке.
3. Сделать редирект со страниц со step с помощью modrewrite.
...
Если же просто постоянный location с одной страницы на другую - это не повод для бана, без разницы, с помощью php вы заголовок выдаёте или нет. Но страницы с редиректом, понятно, в выдаче не будет (на ней же текста нет)
То что страницы не будет в выдаче, вы погорячились :) Может быть урл страницы на которой стоит редирект, а все остальное страницы, на которую она ссылается.
Примеры:
1. Запрос вклады домен www.mosoblbank.ru. Страница в серпе стоит вклады, а редирект стоит на вклады. Причем, редирект стоит изначально (разработчики нового движка "постарались"). Т.е. на первом url'е никогда не было страницы, отдающей 200 ОК и содержащей контент.
И таких страниц в яндексе масса.
Я вроде понял. На ваш каталог появляются ссылки, а вы не размещаете поданные сайты в каталог? Скорее всего, ваш каталог попал в базы каталогов и в системы типа 1ps. А те кто прогоняют сайты по каталогам просто ставят весь список обраток, который дает система.
Кроме изменения сайта и структуры ничего больше не делалось? Я имеею в виду прогоны по каталогам, спам на доски объявлений, форумы и т.п., покупка ссылок в большом количестве?
http://relax.ngs.ru/fdgdfgdfgdfgdfgdfg выдает "HTTP/1.1 302 Moved Temporarily". А страница http://404.ngs.ru/error.php выдает же "HTTP/1.1 200 OK". Поэтому благополучно помещена в индекс.
...по моему сеарчу в топ 2м стоит сайт...
в третьих - анкоры внешних ссылок на сайт - вообще не имеют в тексте сеарча, вопрос, как такое может быть? :)
1. Могут быть внутренние ссылки с требуемым анкором.
2. Вы находите не все внешние ссылки с анкором.
3. Ссылки стоят на "зеркала".
...
Знатоки, можети подсказать что за поисковой пам нашёл там яндекс, ну чтобы я убрал, а то я не могу понять в чем дело....
Если сайт не открывается, следовательно поисковый спам они там не нашли :)