Robot.txt помогите правильно настроил?

123
Selend
На сайте с 20.04.2013
Offline
96
#11

Спасибо, большое.Скинул просмотрим схавает или нет.

Отличный телеграм канал про таргет Facebook и instagram - здесь (https://t.me/targetinFB)
E
На сайте с 21.09.2009
Offline
283
#12

Selend, в ВМТ через "посмотреть как гуглебот" можно проверить доступность.

Selend
На сайте с 20.04.2013
Offline
96
#13
easywind:
Selend, в ВМТ через "посмотреть как гуглебот" можно проверить доступность.

А подробней как и где именно это посмотреть? В яндексе знаю, а вот гугле нет.

I
На сайте с 19.12.2011
Offline
90
#14
Selend:

А сам robot.txt составлен правильно?

Нет не правильно, оставьте вот это.

User-agent: *

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /catalog

Disallow: /download

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Disallow: /*?tracking=

Disallow: /*&tracking=

Clean-param: tracking

Host: site.ru

Sitemap: site.ru/sitemap.xml

Этого всем хватит. Гугл все равно плевал на ваш роботс, Яндекс все поймет.

Продажа оригинальной продукции Apple в Москве Apple-Seller.ru (http://apple-seller.ru/). Отличный VPS/VDS хостинг для сайтов в Inferno Solutions (http://cp.inferno.name/aff.php?aff=1489).
Selend
На сайте с 20.04.2013
Offline
96
#15
iSeller:
Нет не правильно, оставьте вот это.

User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=
Clean-param: tracking
Host: site.ru
Sitemap: site.ru/sitemap.xml

Этого всем хватит. Гугл все равно плевал на ваш роботс, Яндекс все поймет.

А для яндека я читал что отдельно надо?

E
На сайте с 21.09.2009
Offline
283
#16
iSeller:
Гугл все равно плевал на ваш роботс,

пруф про сайт думы снова показать?

---------- Добавлено 26.01.2014 в 03:22 ----------

Selend:
А для яндека я читал что отдельно надо?

для каждого бота, если команды отличаются нужна отдельная группа. Только сайтмап может идти без группы.

M
На сайте с 26.06.2013
Offline
34
#17
Selend:12567050:
Здравствуйте, google сегодня выбbл что доступ не было получено Robot.txt.

Помогите пожалуйста в чем ошибка?

Установите сеопро и сеоменеджер. Для генерации урл поставьте дидсео и не долбите себе мозг.

Selend
На сайте с 20.04.2013
Offline
96
#18

Не хочет гугл индексировать выбивает ошибки:

Ошибка URL

DNS

Подключение к серверу

Доступ к файлу robots.txt

Не хочет гугл индексировать выбивает ошибки

Как исправить?Я уже этот робот.тхт как только не загружал.

---------- Добавлено 26.01.2014 в 11:26 ----------

mstkalenko:
Установите сеопро и сеоменеджер. Для генерации урл поставьте дидсео и не долбите себе мозг.

Сеопро стоит дедсео тоже.

E
На сайте с 21.09.2009
Offline
283
#19

Selend, ошибки ДНС можно проверит здесь intodns.com запросите хостера если есть с этим проблемы.

M
На сайте с 26.06.2013
Offline
34
#20
Selend:12569519:
Не хочет гугл индексировать выбивает ошибки:
Ошибка URL
DNS
Подключение к серверу
Доступ к файлу robots.txt
Не хочет гугл индексировать выбивает ошибки
Как исправить?Я уже этот робот.тхт как только не загружал.

---------- Добавлено 26.01.2014 в 11:26 ----------

mstkalenko:
Установите сеопро и сеоменеджер. Для генерации урл поставьте дидсео и не долбите себе мозг.

Сеопро стоит дедсео тоже.

На сколько я знаю гуугл кеширует роботс и если он в первый раз увидел ошибку, то пока он снова не захочет сам посмотреть его, вы ему исправленный роботс не подсуните. Подождите пару дней.

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий