- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Не смог найти ответ поиском, думаю, что "для новичков" - самый подходящий раздел.
Вопрос в следующем - что-то, написанное в robots.txt - это запрещающее правило на добавление в индекс, или на просмотр содержимого страницы роботом?
Благодарю за ответ.
это запрет на индексацию
На скачивание роботом-индексатором и на сохранение куда-либо.
Зеркальщик Яндекса - может скачивать.
Благодарю за объяснения, объясню в чем дело.
Сайт имеет структуру
site.com/news/nature/gallery001/index.htm
каждая из страниц index.htm содержит уникальное описание и 5- 7 картинок.
При клике на картинку открывается страница
site.com/news/nature/gallery001/picture_01.htm
при этом страницы особо не отличаются контентом - слегка титл и номер фотографии в галерее.
Примерно месяц назад схватил АГС, после чего начал размышлять на тему того, почему это могло случиться - вывод напросился сам собой - в роботсе прописал
Disallow: /picture_
Теперь и сам вопрос - правильно ли написана строка, поскольку робот (тот, что определяется, как Yandex) продолжает шерстить по сайту. Если я правильно понимаю, то индексатор не должен заходить на эти страницы.
Спасибо.
поскольку робот (тот, что определяется, как Yandex) продолжает шерстить по сайту.
Не сразу реагирует на запрет
Проще на такие ссылки ставить rel=nofollow - адекватно воспринимается всеми ПС.
Не сразу реагирует на запрет
в роботс было прописано еще 23 ноября. Неужели еще не настал час Х?
Проще на такие ссылки ставить rel=nofollow - адекватно воспринимается всеми ПС.
В принципе, тоже выход, но robots-то, вроде, тоже не просто так придумывали...
в роботс было прописано еще 23 ноября. Неужели еще не настал час Х?
А, только сейчас заметил, вы неправильно директиву прописали
Disallow: /*/picture_
благодарю, попробую так...