- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
а Яндекс всё равно индексирует страницы из этих разделов. пытаюсь удалить страницы в "Удалить URL", говорит, "Нет оснований для удаления. Сервер не возвращает код 404, индексирование не запрещено ни в robots.txt, ни метатегом noindex."
фрагмент робота:
..
Disallow: /basket/
Disallow: /akcii/
..
ну, и ещё несколько подобных строчек. используется только директива Disallow для запрета разделов.
т.е. Allow, которая могла бы что-то из закрытого разрешить, нет..
помогите одолеть робота вместе с яндексом, пожал-ста..
bulavka, пожалуйста весь robots.txt в студию.
P.S. И еще. В Яндекс вебмастере есть возможность проверить-проанализировать robots.txt, не пользовались ли такой штукой? Может есть ошибка все таки.
Покажите весь robots.txt и URL, которые вы удаляете.
Disallow: /basket/
Disallow: /akcii/
/basket/ - директория с файлами? Или часть урла?
фрагмент роботс.тхт для яндекса такой:
User-Agent: Yandex
Disallow: /?
Disallow: /compare/
Disallow: /basket/
Disallow: /akcii/
Disallow: /vip_bukety2/
Disallow: /ekonom_bukety2/
Disallow: /srednie_bukety/
Disallow: /obychnye_bukety/
Disallow: /svadebnye_bukety2/
Disallow: /po_cvetu/
Disallow: /segodnya_dostavili/
Host: .........ru
Jaf4,
/basket/ - это корзина магазина и похоже, что это конец урла, т.к. клик по любой ссылке уводит из этого раздела, т.е. /basket/ из адреса пропадает..
Talisman13,
в Вебмастер яндекса закинули его, пишет, какие секции-строки используются, про ошибки ни слова, по кр. мере ничего красного или какого-то текста, говорящего о том, что есть ошибки, не вижу..
не знаю, что означает запрет вот этой штуки:
Disallow: /?
может, в ней всё дело?
Пока ничего не ясно, нужно видеть весь файл +
и URL, которые вы удаляете.
Если будете и дальше шифроваться, повешу по 2 балла за флуд.
Ида, в этом разделе есть FAQ, там есть ссылка на описание robots.txt Яндекса, откройте и читайте внимательно, больше вам ничего не потребуется.
Подсказка: пути в Disallow указываются от корня сайта.
помогите одолеть робота вместе с яндексом, пожал-ста..
Я читал короткие и понятные статьи о robots.txt на сайте: http://robotstxt.org.ru/
Если не хотите светить свой файл, то обращайтесь в поддержку яндекса.
Обычно проблема "в индекс не лезет", а тут проблема наоборот.
всем спасибо!.
вот, в чём ошибка была, не учли, что
т.е. правильно Яндекс писал, что они не закрыты в роботе, те страницы..
спасибо ещё раз..