- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Почему Яндекс не индексирует страницы вида site.ru/lechenie-alkogolizma/алкоголизм-и-дипсомания/ при таком файле robots.txt:
User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /share42/
Disallow: /wm/
Disallow: /404/
Disallow: /component/
P.S. для Гугла такая же установка стоит и все ок, страницы такого вида в индексе Гугла. Помогите, пожалуйста, разобраться в чем причина?!
Ссылка http://www.alkonarkostop.com.ua/
проблема не в robots
Здравствуйте !
Помогите разобраться, если мне надо закрыть в robots все ссылки вида:
www.site.ru/категория/раздел/страница/v
в роботс должна быть запись вида
Disallow: */v ?
Не заблокируются ли в таком случае подобные страницы:
www.site.ru/категория/раздел/privet
?
Грубо говоря, как сделать блок именно нужно уровня? В моём случае, если не ошибаюсь, пятого уровня.
Заранее спасибо.
В чем проблему у bulatbulat?
Здравствуйте !
Помогите разобраться, если мне надо закрыть в robots все ссылки вида:
www.site.ru/категория/раздел/страница/v
в роботс должна быть запись вида
Disallow: */v ?
Не заблокируются ли в таком случае подобные страницы:
www.site.ru/категория/раздел/privet
?
Грубо говоря, как сделать блок именно нужно уровня? В моём случае, если не ошибаюсь, пятого уровня.
Заранее спасибо.
Disallow: /v$
- закроет все /v
Disallow: /category/razdel/str/v$
- закроет ваш уровень
Не заблокируются ли в таком случае подобные страницы:
www.site.ru/категория/раздел/privet
?
нужно поставить знак $ - конец раздела, и соответственно начинать с /
Большое спасибо за ответ
Подскажите, если мне нужно, чтобы основной сайт не индексировался, а сайты на поддоменах индексировались, при условии, что папки с файлами поддоменов находятся в корне?
Что прописать в роботсе для всех ботов?
Яндекс не индексирует сайт больше 1,5 месяца, пишет, что в роботс стоит запрет на индексацию "/"
Гугл всё проиндексировал без проблем.
В robots.txt такого запрета нет... вот текущий роботс:
User-agent: *
Allow: /
Disallow: /bitrix/
Disallow: /auth/
Disallow: /links/
Disallow: /personal/
Disallow: /search/
Disallow: /test/
Disallow: /auth.php
Disallow: /*?print=
Disallow: /*&print=
Disallow: /*register=yes
Disallow: /*forgot_password=yes
Disallow: /*change_password=yes
Disallow: /*login=yes
Disallow: /*logout=yes
Disallow: /*auth=yes
Disallow: /*backurl=*
Disallow: /*BACKURL=*
Disallow: /*back_url=*
Disallow: /*BACK_URL=*
Disallow: /*back_url_admin=*
Sitemap: http://-------.ru/sitemap.xml
Host: -----.ru
В чём может быть проблема?
Спасибо!
Яндекс не индексирует сайт больше 1,5 месяца, пишет, что в роботс стоит запрет на индексацию "/"
Гугл всё проиндексировал без проблем.
В robots.txt такого запрета нет... вот текущий роботс:
...
В чём может быть проблема?
Спасибо!
Аналогично, никак не пойму..
Подскажите, если мне нужно, чтобы основной сайт не индексировался, а сайты на поддоменах индексировались, при условии, что папки с файлами поддоменов находятся в корне?
Что прописать в роботсе для всех ботов?
По-идеи можно закрыть только главный сайт, поддомены даже без робота проиндексируются.
Для основного сайта в корне robots.txt:
User-agent: *
Disallow: /
Для поддоменов в папках robots.txt:
User-agent: *
Allow: /
---------- Добавлено 22.11.2014 в 17:50 ----------
Яндекс не индексирует сайт больше 1,5 месяца, пишет, что в роботс стоит запрет на индексацию "/"
Гугл всё проиндексировал без проблем.
В robots.txt такого запрета нет... вот текущий роботс:
User-agent: *
Allow: /
Disallow: /bitrix/
Disallow: /auth/
Disallow: /links/
Disallow: /personal/
Disallow: /search/
Disallow: /test/
Disallow: /auth.php
Disallow: /*?print=
Disallow: /*&print=
Disallow: /*register=yes
Disallow: /*forgot_password=yes
Disallow: /*change_password=yes
Disallow: /*login=yes
Disallow: /*logout=yes
Disallow: /*auth=yes
Disallow: /*backurl=*
Disallow: /*BACKURL=*
Disallow: /*back_url=*
Disallow: /*BACK_URL=*
Disallow: /*back_url_admin=*
Sitemap: http://-------.ru/sitemap.xml
Host: -----.ru
В чём может быть проблема?
Спасибо!
Проблемы не вижу, если только в склейке с другим хостом и на нем может быть другой роботс, Host: -----.ru
Попробуйте отказаться от allow: /
и напишите в Яндекс. Ну или мне в личку урл киньте, посмтрю.
---------- Добавлено 22.11.2014 в 17:51 ----------
Аналогично, никак не пойму..
аналогично, смотрите куда показывает смайл ☝
ребята, вы хотя бы откликайтесь, что прошла ошибка или нет, а то как в танке 😂