- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
подскажите как расшифровать данный robots.txt - что запрещает, что разрешает?
User-agent: *
Disallow: /*/
Sitemap: http://мойсайт.ru/=sitemap
User-Agent: Yandex
Disallow: /*/
Sitemap: http://мойсайт.ru/=sitemap
Host: мойсайт.ru
подскажите как расшифровать данный robots.txt - что запрещает, что разрешает?
Вам уже ответили в отдельной теме /ru/forum/comment/14759336
Запрет индексации всех категорий на сайте кроме
site.ru?любаябелеберда
А так же дали грамотный совет использовать https://webmaster.yandex.ru/tools/robotstxt/
Поставил форум на директорию сайта site.ru/forum. Поскольку форум на отдельном движке, нужно прописать robots. Есть robots основного сайта и форума. Как их соединить в один?
Роботс WP
Роботс phpbb
Просто соедини их и вставляй в основной файл site.ru/robots.txt
Привет всем. Не могли вы бы подсказать, как прописать в файле php код для отдельной страницы? Помогите пожалуйста.
Напиши движок который стоит.
Так будет проще тебе подсказать код.
Но если используете хотите простой код, то
Дальше вместо / прописывайте папки или файлы на сайте.
Поясните,я новичок, для чего закрывать сайты от robots.txt?
Вечер добрый!
Такая проблема:
Есть сайт на WP, на моб. устройствах отображается нормально (добавляю скрин).
Но в выдаче гугла, почему-то под каждым 3-ем запросом гугл добавляет ссылку "Ваша страница не оптимизирована для моб. устройств" и при нажатии на нее попадаем на проверка от гугла, где по результатам он пишет, что
Страница не оптимизирована для мобильных устройств:
- Контент шире экрана
- Ссылки слишком близко друг к другу
и показывает совершенно корявое отображение сайта, которое совершенно не соответствует действительности (скрин прикрепляю)
Тут же есть пункт о том, что такое возможно, просто в robot. txt Гуглботу перекрыто доступ до каких-то разделов и из за этого такая хрень.
Сам robot. txt настроен стандартно под WP.
Посмотрите, пожалуйста и скажите из за чего это может быть и что в данном случае лишнее в robot. txt:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
Вечер добрый!
Такая проблема:
Есть сайт на WP, на моб. устройствах отображается нормально (добавляю скрин).
Но в выдаче гугла, почему-то под каждым 3-ем запросом гугл добавляет ссылку "Ваша страница не оптимизирована для моб. устройств" и при нажатии на нее попадаем на проверка от гугла, где по результатам он пишет, что
Убери из списка следующие правила
Проверить сайт или страницы оптимизированность под мобильную версию можно тут
Убери из списка следующие правила
Проверить сайт или страницы оптимизированность под мобильную версию можно тут
Вот как раз гугл мне на основании этой проверки и говорит, что не оптимизирован.
А подскажите, пожалуйста, почему именно эти элементы?
Просто в результатах этой проверки, есть пункт:
"Как робот Googlebot видит страницу
Некоторые ресурсы страницы (20) заблокированы в файле robots.txt."
и среди этих элементов присутствует например вот такой:
http://germanylife.ru/wp-includes/cs....css?ver=4.5.4
Не значит ли это, что Disallow: /wp-includes тоже стоит убрать?
И еще как на счет Disallow: /wp-content/cache?
Читал на какой-то теме, что его тоже лучше разрешить
Не значит ли это, что Disallow: /wp-includes тоже стоит убрать?
И еще как на счет Disallow: /wp-content/cache?
Disallow: /wp-includes
тоже можете убрать.
Disallow: /wp-content/cache
Этот я бы оставил, т.к не известно мне в каком формате хранится кэш.