- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
ДОбрый день друзья!
По инструкции яши https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml
составил робота для вордпресса:
User-agent: Yandex
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /tag
Host: https://vokalistu.ru
Sitemap: https://vokalistu.ru/sitemap.xml
для гугла пока в поиске...
robots.txt в Вебмастере проверить можно.
robots.txt в Вебмастере проверить можн
Правильность -да. Эффект - только практически)
Правильность -да. Эффект - только практически)
Смотря что подразумевать под словом "эффект". В том же вэбмастере можно проверить разрешен или запрещен для робота URL.
ДОбрый день друзья!
По инструкции яши https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml
составил робота для вордпресса:
User-agent: Yandex
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /tag
Host: https://vokalistu.ru
Sitemap: https://vokalistu.ru/sitemap.xml
для гугла пока в поиске...
Я бы на вашем месте в первую очередь доработал "прыгающее" при наведении меню, смотрится ужасно...
В том же вэбмастере можно проверить разрешен или запрещен для робота URL.
Все верно, соглашусь. Но не всегда все проверишь, особенно если много страниц и категорий. А время показывает - что попало в индекс лишнее.
404ю страницу подпилите
вообще то надо вот так по моему мнению:
User-agent: *
ваши Disallow:
Host: vokalistu.ru
на сколько я знаю Host пишут или с www( До основания Руси) и просто vokalistu.ru , без https://
хотя может и разницы нет)
на сколько я знаю Host пишут
Читайте первоисточники -
Директива Host должна содержать:
Указание на протокол HTTPS, если зеркало доступно только по защищенному каналу (Host: https://myhost.ru).
Одно корректное доменное имя, соответствующего RFC 952 и не являющегося IP-адресом.
Номер порта, если необходимо (Host: myhost.ru:8080).
Некорректно составленные директивы Host игнорируются.
https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml?lang=ru
Читайте первоисточники -
Директива Host должна содержать:
Указание на протокол HTTPS, если зеркало доступно только по защищенному каналу (Host: https://myhost.ru)
да я не спорю, кто так ставит, кто-то так... просто думал что есть разница.
woman.ru
Host: www.woman.ru
зачем? если никто уже не вбивает www
типо страницы сайта отображаются с www и без, у меня на некторых сайтах из-за этого была раньше путаница
вообще то надо вот так по моему мнению:
User-agent: *
ваши Disallow:
Host: vokalistu.ru
на сколько я знаю Host пишут или с www( До основания Руси) и просто vokalistu.ru , без https://
хотя может и разницы нет)
При таком варианте Вебмастер яндекса будет ругаться на ошибку в host.
У ТС правильно указан с https://.