Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

Правильный файл роботс.тхт для ВордПресс

12 3
H
На сайте с 01.04.2014
Offline
571
Had
1389

Сделал файл роботс.тхт и залил на фтп. Посмотрите, пожалуйста, правильно сделал файл роботс?:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /category/
Disallow: /author/
Disallow: /page/
Disallow: /tag/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /category/
Disallow: /author/
Disallow: /page/
Disallow: /tag/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Host: ********.ru

Ещё такой момент. У меня на сайте нет категорий. Точнее есть но только одна "главная" и все статьи постятся туда. В связи с этим вопрос касательно этого пункта в файле роботс:

Disallow: /category/

Может из за него поисковые роботы не будут видеть мои статьи?

Vladimir SEO
На сайте с 19.10.2011
Offline
1735
Vladimir SEO
#1

Хад , уже сказали что роботс для каждого сайта должен быть разный

может хватить плодить темы ?

Эксперт по продуктам Google https://support.google.com/profile/58734375 ᐈ Продвижение коммерческих сайтов https://kulinenko.com/
Vladimir SEO
На сайте с 19.10.2011
Offline
1735
Vladimir SEO
#2

https://www.google.com.ua/?gws_rd=ssl#q=%D0%BA%D0%B0%D0%BA+%D1%81%D0%BE%D0%B7%D0%B4%D0%B0%D1%82%D1%8C+robots.txt+wordpress&safe=off

H
На сайте с 01.04.2014
Offline
571
Had
#3

xVOVAx, я погуглил уже и потом только создал тему.

Vladimir SEO
На сайте с 19.10.2011
Offline
1735
Vladimir SEO
#4

еще раз повторяю , для тех кто в танке , для каждого сайта - роботс разный

H
На сайте с 01.04.2014
Offline
571
Had
#5
xVOVAx:
еще раз повторяю , для тех кто в танке , для каждого сайта - роботс разный

Во-первых, первое слово в предложении пишется с большой буквы. Во-вторых, может стоит пройти мимо темы, чем писать всякую хрень?

Роботс разный для сайтов на разных движках. А для ВордПресса он почти одинаковый, возможно различия лишь в нескольких строчках.

AlexStep
На сайте с 23.03.2009
Offline
354
AlexStep
#6

Можно добавить

Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /2015/

и т.д. в зависимости от годов в которых публиковались посты. Чтобы архивы не влетели в индекс.

H
На сайте с 01.04.2014
Offline
571
Had
#7

AlexStep, понятно, спасибо. А в целом всё норм, ошибок нет в файле?

H
На сайте с 01.04.2014
Offline
571
Had
#8

Подскажите плиз, кто шарит. В файле роботс вот это

Disallow: */trackback
что означает? Погуглил, ничего путного не нашёл.
vertuhay2
На сайте с 31.03.2013
Offline
64
vertuhay2
#9
User-Agent: *
Allow: /wp-content/uploads
Disallow: /wp-
Disallow: /cgi-bin
Disallow: /category/
Disallow: /author/
Disallow: /page/
Disallow: /tag/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?*
Disallow: /*.php
Host: ****.ru
Sitemap: http://****.ru/sitemap.xml

Disallow: /feed/

Disallow: */feed #Если 2 строчка есть 1 не надо

Disallow: /*?

Disallow: /*?* #Если 2 строчка есть 1 не надо

---------- Добавлено 23.06.2014 в 14:46 ----------

Посмотрите еще этот роботс, тоже ничего вариант, особенно под гугл.

http://alaev.info/blog/post/4143

скачать игры на пк (https://gig-games.net/) | скачать на телефон (https://gg33.top) | скачать торрент (https://torrent-film.monna.top/)
G
На сайте с 01.09.2010
Offline
49
glafeara
#10

Видимо с поиском совсем худо... Изучайте - раз. Проверяйте - два.

Позиции своих сайтов я снимаю здесь (http://goo.gl/1SQ1Sl)! А тут (http://goo.gl/GfReqm) я чекаю доноров. СМС рассылка (http://smstoyou.sms.ru/) по самой низкой цене.
12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий