- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Уважаемые гуру, что скажете, все ли тут правильно?
Код:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: мойсайт.ru
Sitemap: http://мойсайт.ru/sitemap.xml
Sitemap: http://мойсайт.ru/sitemap.xml.gz
Disallow: /category/*/*
Достаточно так прописать:
А это что за значение у вас?
Для примера, роботс одного своего сайта:
Вообще никакого мусора нет в выдаче.
Кстати, у вас автор не закрыт, а это лишние дубли по записям. Можете мой копировать и все будет meow 😂
Disallow: /category
а категории обязательно закрывать?
а категории обязательно закрывать?
Да. Если открытыми оставлять, то в выдаче дубли будут.
Да. Если открытыми оставлять, то в выдаче дубли будут.
А я не закрыываю, все норм, продвигаю каты :)
---------- Добавлено 09.11.2013 в 13:03 ----------
Host: мойсайт.ru
структура сайта соответствует роботсу канешна ))
Disallow: /*?*
А это что за значение у вас?
Под маску /*?* попадают все страницы, вытащенные из базы при помощи get запросов. А они дублируют соответствующие страницы, например, с ЧПУ.
serjoo, я стараюсь все лишнее изолировать от выдачи... а по катам у меня своя заморочка придумана, чтобы все по феншую было :)
Кошачий, а зачем камменты закрывать? я обратил внимание что наличие камментов, двигает страницу в выдаче, может камменты оставить все же?
Xammer2000, это уже свои заморочки. Я, например, вообще камменты выпиливаю из кода 😂
каждый сайт имеет свое направление и при составлении роботса нужно учитывать, что лучше запретить, а что оставить в индексе. Я скинул стандартный вариант роботса на мфа, который подойдет и для обычных сайтов, ибо он изолирует весь мусор.
А я не закрыываю, все норм, продвигаю каты :)
Можно и не закрывать, но тогда лучше добавить текст на страницу категории и закрыть навигацию;)
Можно и не закрывать, но тогда лучше добавить текст на страницу категории
А я без текста продвигаю, ага. -)
закрыть навигацию
какую именно? все сложно