Нужна помощь. Снижение трафика после изменений в robots.txt

M
На сайте с 04.03.2016
Offline
1
719

Добрый день уважаемые господа. Суть вот в чем...

Пытался сделать для своего сайта на WordPress хороший robots.txt, но по итогу просто взял его в интернете. По запросу "robots для wordpress" мне выдало довольно неплохой с виду файл, в котором я не заметил одну интересную строку:

Disallow: /*p*

А у меня на сайте все посты имеют ссылку типа (.ru/?p=*), и вчера я проснулся с удивлением обнаружив что трафик семимильными шагами летит вниз, а страницы выпадают из индекса.

К тому моменту пока разобрался, робот гугла полностью прошелся по сайту и не оставил в индексе ни одной страницы (ведь только посты и планировалось оставить).

На данный момент изменил robots.txt вот на такой:

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: */trackback

Disallow: */*/trackback

Disallow: */*/feed/*/

Disallow: */feed

Disallow: /tag

Disallow: /?s*

Disallow: /?m*

Disallow: /?cat*

User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: */trackback

Disallow: */*/trackback

Disallow: */*/feed/*/

Disallow: */feed

Disallow: /tag

Disallow: /?s*

Disallow: /?m*

Disallow: /?cat*

Host: ***

Sitemap: http://***/sitemap.xml.gz

Sitemap: http://***/sitemap.xml

Кто может подсказать, какие действия еще предпринять, что бы поскорее вернуться на позиции, сколько это занимает времени если просто ждать, и можно ли это как-то ускорить?

S
На сайте с 09.11.2015
Offline
35
#1

в панели search consol инструмент посмотреть как гугл бот->потом добавить в индекс. Можно пройтись по самым важным страницам, остальные подхватит и так за пару дней, это же не яндекс (если роботс правильно настроен снова)

[Удален]
#2

Мне кажется, причина не в robots

U
На сайте с 04.03.2016
Offline
1
#3

В гугле есть инструмент посмотреть как теперь гугл видит странички после того как вы позакрывали плагины и так далее... Маркер посмотрите.

---------- Добавлено 04.03.2016 в 15:44 ----------

Вчера я так же менял роботс на форуме, наоборот открыл, приток на следующий же день +300

BooblikBBW
На сайте с 01.07.2014
Offline
89
#4

Яша не такой быстрый как Гоша, придётся подождать месяц пока всё вернется.

Зачем делали (.ru/?p=*)?

В WP в админке есть раздел "Постоянные ссылки"

Поставьте %postname%.html в произвольной форме + плагин ЧПУ

Приведите тогда уже ссылки в порядок на сайте, если уж такую кашу заварили.

А вообще, есть народная мудрость "Работает - Не трогай!"

Feels Like Insomnia
На сайте с 13.01.2013
Offline
39
#5
BooblikBBW:
Яша не такой быстрый как Гоша, придётся подождать месяц пока всё вернется."

Из чего можно сделать вывод, что Яндекс скорее всего эти изменения еще и не заметил, а страницы пропали из индекса в Гугле.

A
На сайте с 15.04.2010
Offline
57
#6

Делать ЧПУ это значить делать на все УРЛ 301 редирект. Вроде robots.txt у Вас нормальный. А в индекс уже загнать не проблема. Как тут правильно советовали можно через просмотр как гугл бот, можно через твиттер. Тут целый списко по загону в индекс http://blog.badata.net/ru/340-kak-uskorit-indeksaciyu-sajta.html

Как Сделать Идеальный Ссылочный Профиль Сайта https://www.youtube.com/watch?v=_ye3dKYw6hc (https://www.youtube.com/watch?v=_ye3dKYw6hc) http://sabibon.info/ (http://sabibon.info/) - самое интересное в сети

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий