Доброго дня! С вопросом по все тому же разделу, на который был настроен плагин. Индексацию в вордпрессе разрешила, запись <metaname='robots'content='noindex, nofollow' /> в коде исчезла, на переобход в вебмастере страницы раздела отправила. Робот обошел вчера, но раздела так и не появляется в индексе - ни в гугле, ни в яндексе.
Мог ли плагин оставить еще какой-то след, препятствующий индексации? Как и что еще можно проверить, в чем причина?
Вчера в яндексе через "запрос site:site.ru" показывались отдельные страницы, сегодня - нет. В сохраненной копии была вчерашняя дата. Поисковик как будто выкидывает.
А это что по вашему?
Disallow: */site
Эта запись ограничивает попадание хвостов в индекс, чтобы не попадали дубли страниц в индекс
Связано именно с тем, что вам явно в кавычках указано.
Так нет запрета на сайтмап.
User-agent: Yandex
Disallow: /*?
Allow: /*?p=
Disallow: /post/search*
Disallow: /admin*
Disallow: /auth*
Disallow: /spb/auth*
Disallow: /user*
Disallow: /post/gallery
Disallow: /post/yandex/getMapMarkAll
Disallow: /post/getSchedule*
Disallow: /post/*/singleInfo*
Disallow: */site
User-agent: Googlebot
Disallow: /*?
Allow: /*?p=
Disallow: /post/search*
Disallow: /admin*
Disallow: /auth*
Disallow: /spb/auth*
Disallow: /user*
Disallow: /post/gallery
Disallow: /post/yandex/getMapMarkAll
Disallow: /post/*/singleInfo*
Disallow: /post/getSchedule*
Disallow: */site
User-agent: *
Disallow: /*?
Allow: /*?p=
Disallow: /post/search*
Disallow: /admin*
Disallow: /auth*
Disallow: /spb/auth*
Disallow: /user*
Disallow: /post/gallery
Disallow: /club/search/
Disallow: /post/yandex/getMapMarkAll
Disallow: /post/*/singleInfo*
Disallow: /post/getSchedule*
Disallow: */site
Sitemap: https://www.названиесайта.ru/xml/sitemap
Вроде ставил этот плагин раньше, не было таких проблем, может с ним и не связано?)
Да вот больше не с чем связать
https://webmaster.yandex.ru/tools/robotstxt/ тут можно проверить, разрешена страница доя индексации или нет. Гугл сейчас довольно долго индексирует
Спасибо, проверяла, запретов нет.
Мог ли плагин оставить еще какой-то след, препятствующий индексации? Как и что еще можно проверить, в чем причина?
Вчера в яндексе через "запрос site:site.ru" показывались отдельные страницы, сегодня - нет. В сохраненной копии была вчерашняя дата. Поисковик как будто выкидывает.
Зайти в админке в основные настройки, там раздел чтение и выставить разрешение на индексацию сайта.
Не нужно закрывать. В индекс попадают html страницы, а не json. Боты 1 раз пройдут по ссылкам и забудут про них.
Спасибо! Понаблюдаем.
вообще они не должны индексироваться.
Но можешь добавить
Спасибо!