- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Что делать, если ваша email-рассылка попала в спам
10 распространенных причин и решений
Екатерина Ткаченко
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Яндекс проиндексировал страницы которых нет и никогда не было на сайте. Страницы имеют вид: главная/?bla-bla-bla
Практически весь сайт сделан на статических страницах и URLы вида /?bla-bla-bla никогда не использовались и не используются. Однако у сайта есть несколько алиасов и возможно на каком-то из них когда-то в прошлом была такая структура. Как вы понимаете главная страница каталога со знаком вопроса ошибки 404 не выдает. Для примера можете набрать: http://www.yandex.ru/?tra-ta-ta=1 - в итоге получите тот же http://www.yandex.ru/
А теперь собственно вопрос: Как их выкинуть из выдачи Я?
Может быть каким-то образом можно настроить сервер, чтобы он выдавал ошибку 404 на такие запросы?
http://webmaster.yandex.ru/delurl.xml
В robots.txt добавьте:
Disallow: /?
Добавить в robots.txt:
Disallow: /?
Dybra, так не выдает он ошибку 404 при запросе /?bla-bla-bla! Можете проверить на любом своем сайте.
ivp и Defil, извиняюсь за глупый вопрос: мне это тоже пришло в голову первым способом борьбы, но возникли сомнения, а поймет ли поисковик это? Не получится ли в результате запрета на индекс всех страниц?
Добавил в robots.txt строку:
Disallow: /?
Пытаюсь удалить, получаю:
Документы по адресу http://www.***********/? не могут быть удалены из базы Яндекса, так как данный адрес не запрещен в /robots.txt. Нет оснований для удаления.
Dybra, так не выдает он ошибку 404 при запросе /?bla-bla-bla! Можете проверить на любом своем сайте.
ivp и Defil, извиняюсь за глупый вопрос: мне это тоже пришло в голову первым способом борьбы, но возникли сомнения, а поймет ли поисковик это? Не получится ли в результате запрета на индекс всех страниц?
Если в УРЛ-ах ЧПУ, то не запретит. Роботс запредит индексацию всех страниц, начинающихся с "?".
Удаление URLа
Документы по адресу http://www.***********/? не могут быть удалены из базы Яндекса, так как данный адрес не запрещен в /robots.txt. Нет оснований для удаления.
Подождите немного, чуть позже схавает.
Что такое "ЧПУ"?
Удалить удалось благодаря прописыванию подробного адреса:
Но ведь это бред! Откуда я знаю какие могли быть варианты URLов у алиасов? Сейчас я нашел два - убил. А если завтра их появится сто? Повторюсь: просто на /? Яндекс никак не прореагировал - см. выше "нет оснований".
Яндекс проиндексировал страницы которых нет и никогда не было на сайте. Страницы имеют вид: главная/?bla-bla-bla
Практически весь сайт сделан на статических страницах и URLы вида /?bla-bla-bla никогда не использовались и не используются.....А теперь собственно вопрос: Как их выкинуть из выдачи Я?...
Может быть каким-то образом можно настроить сервер, чтобы он выдавал ошибку 404 на такие запросы?
Может у Вас работает теперь модреврайт, а Вы об этом не знаете?:)
Запретите в robots.txt страницы, которые Вам не нужны, как Вы это сделали (Disallow: /?) и они постепенно исчезнут из выдачи.
Я когда запускал модреврайт так сделал и через некоторой время все php страницы исчезли без всякого ручного-принудительного удаления, причем не только из Яндекса, но и из выдачи всех поисковиков.
Dybra, так не выдает он ошибку 404 при запросе /?bla-bla-bla! Можете проверить на любом своем сайте.
Конечно не выдает, такой же документ существует. Для этого пишется небольшой обработчик на php который выдает код 404 если скрипту передаются какие-либо переменные.