- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Помогите, пожалуйста. Следующая ситуация.
Есть новый сайт на Wordpress. Добавляются материалы.
Справку яндекса и прочее читали, все равно, ответов точных нет.
Дабы, в индексе не оказалось лишнего, было решено закрыть от поисковиков ряд страниц:
Архивы:
http://site.ru/2012/10/21/ - где 2012 год, 10 октябрь, 21 число.
Параметры в robots.txt: Disallow: /2012/*/*
Может это неправильно? Было еще 4 варианта:
1. Disallow: /201*
2. Disallow: /2012/*/*/*
3. Disallow: /2012/
4. Disallow: /2012
Рубрики:
http://site.ru/category/remont/
Параметры в robots.txt: Disallow: /category/*/*
Если неправильно, еще было 3 варианта:
1. Disallow: /category/*
2. Disallow: /category/
2. Disallow: /category
Метки:
http://site.ru/tag/remont/
Параметры в robots.txt: Disallow: /tag/*/*
Если неправильно, еще было 3 варианта:
1. Disallow: /tag/*
2. Disallow: /tag/
3. Disallow: /tag
Также, возникло желание закрыть возможность индексирования страниц вида:
http://site.ru/?474hg
Поскольку такие страницы не перенаправляют на страницу 404 ошибки, а оставляют на сайте.
Для этого, прописали правила в robots.txt:
Disallow: */?
Disallow: /?*
Возможно, тоже, есть в чем-то косяк.
На данный момент, ситуация с сайтом такая:
Яндекс - в индексе только главная страница
Гугл - в индексе оказались страницы вида:
http://site.ru/tag/profi/
http://site.ru/category/sovety/
Хотя они вроде как запрещены.
Возможно, яндекс еще просто не дошел до сайта, хотя уже прошло 2 недели, но как заставить гугл понимать robots.txt?
Сейчас, он выглядит следующим образом:
Помогите, с этим, пожалуйста. Нужно составить правильный robots.txt закрывающий указанные выше страницы.
правильно так
Disallow: /2012/ закрывает все что есть в каталоге
Disallow: /category/ тоже
Disallow: /tag/ тоже
Disallow: *?* закрывает все что содержит ?
остальное не правильно
а это вообще убрать
убрать
Disallow: /*.txt
Disallow: /*.html
Disallow: /*.php
в панеле вебмастера гугла и яндекса есть сервис проверки правильности роботс
denden11,
Благодарю за отклик. То есть, такой файл будет правильнее?
в панеле вебмастера гугла и яндекса есть сервис проверки правильности роботс
Да, но что я бы туда не вставил, им все нравится.
это противоречит друг другу
Disallow: */trackback
Disallow: /trackback
Disallow: */feed
Disallow: /feed
Disallow: */comments
Disallow: /comments
правильно
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
host внизу обычно ставят
denden11, То есть, окончательно правильно будет так?
host внизу обычно ставят
Это для яндекса. Другие ПС это не понимают.
Это для яндекса. Другие ПС это не понимают.
яндекс самый умный поисковик? тогда и sitemap для него вверх поставьте...
А это точно, что:
Disallow: /category/
Закроет страницы подобного типа?
http://site.ru/category/remont/