Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Как закрыть от индексации определенные страницы?

Zhezkazganetcs
На сайте с 21.04.2013
Offline
166
Zhezkazganetcs
2176

всем здрасти

есть такой урл 

сайтру/autoparts/props.php?of=1624057

дак вот как закрыть от индексации props.php и все что дальше

т.к. такие файлы не нужны в индексе

+ еще появляются страницы, типа 

autoparts/props.php?of=1052633 

autoparts/props.php?of=1052657 

autoparts/props.php?of=1052658

+ еще похожие

дак вот как закрыть от индексации такие страницы? 

Disallow: /*props.php*
не работает, страницы появляются
✓ПЛАТИТ больше, чем РСЯ! (https://luckyads.pro/account/signup/?refid=17890) ✓автозапчасти (https://welltorg.com/) ✓грузоперевозки (http://autotrucking.com/) ✓лучший постинг в соц.сети (https://smmbox.com/c/41830/)
Станислав Романенко
На сайте с 05.09.2007
Offline
325
Станислав Романенко
#1

В Яндекс.Вебмастере в разделе Инструменты - Анализ robots.txt - Разрешены ли URL что пишет при проверке таких урлов?

Сайт не лезет в топ? Сделаю аудит без воды всего за 8000 рублей! Отзывы клиентов тут (https://searchengines.guru/ru/forum/939454), почта для связи: ingref@ya.ru Посмотрю, в чём проблема с вашим сайтом, за 100 рублей (https://searchengines.guru/ru/forum/comment/15662080).
W
На сайте с 13.12.2015
Offline
19
Winddancer
#2

Если не ошибаюсь, правильно будет написать:

Disallow: */props.php*

Веду собственный курс по SEO (на украинском) https://seomadeplace.com/uk/kursi-po-marketingu/seo-kurs/
Zhezkazganetcs
На сайте с 21.04.2013
Offline
166
Zhezkazganetcs
#3
Ingref:
В Яндекс.Вебмастере в разделе Инструменты - Анализ robots.txt - Разрешены ли URL что пишет при проверке таких урлов?

Не используется ни одной строки

Станислав Романенко
На сайте с 05.09.2007
Offline
325
Станислав Романенко
#4

User-Agent: * в роботсе есть? Выкладывайте его сюда.

Zhezkazganetcs
На сайте с 21.04.2013
Offline
166
Zhezkazganetcs
#5

[spoiler]

User-agent: *

Allow: /catalog/view/javascript/

Allow: /catalog/view/theme/*/

Disallow: /*props*

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /catalog

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Disallow: /*?tracking=

Disallow: /*&tracking=

Disallow: /*compare-products

Disallow: /*search

Disallow: /*cart

Disallow: /*checkout

Disallow: /*login

Disallow: /*logout

Disallow: /*vouchers

Disallow: /*wishlist

Disallow: /*my-account

Disallow: /*order-history

Disallow: /*newsletter

Disallow: /*return-add

Disallow: /*forgot-password

Disallow: /*downloads

Disallow: /*returns

Disallow: /*transactions

Disallow: /*create-account

Disallow: /*recurring

Disallow: /*address-book

Disallow: /*reward-points

Disallow: /*affiliate-forgot-password

Disallow: /*create-affiliate-account

Disallow: /*affiliate-login

Disallow: /*affiliates



User-agent: Yandex

Allow: /catalog/view/javascript/

Allow: /catalog/view/theme/*/

Disallow: /*props*

Disallow: /*route=account/

Disallow: /*route=affiliate/

Disallow: /*route=checkout/

Disallow: /*route=product/search

Disallow: /index.php?route=product/product*&manufacturer_id=

Disallow: /admin

Disallow: /catalog

Disallow: /system

Disallow: /*?sort=

Disallow: /*&sort=

Disallow: /*?order=

Disallow: /*&order=

Disallow: /*?limit=

Disallow: /*&limit=

Disallow: /*?filter_name=

Disallow: /*&filter_name=

Disallow: /*?filter_sub_category=

Disallow: /*&filter_sub_category=

Disallow: /*?filter_description=

Disallow: /*&filter_description=

Disallow: /*compare-products

Disallow: /*search

Disallow: /*cart

Disallow: /*checkout

Disallow: /*login

Disallow: /*logout

Disallow: /*vouchers

Disallow: /*wishlist

Disallow: /*my-account

Disallow: /*order-history

Disallow: /*newsletter

Disallow: /*return-add

Disallow: /*forgot-password

Disallow: /*downloads

Disallow: /*returns

Disallow: /*transactions

Disallow: /*create-account

Disallow: /*recurring

Disallow: /*address-book

Disallow: /*reward-points

Disallow: /*affiliate-forgot-password

Disallow: /*create-affiliate-account

Disallow: /*affiliate-login

Disallow: /*affiliates

Clean-param: tracking
[/spoiler]
Станислав Романенко
На сайте с 05.09.2007
Offline
325
Станислав Романенко
#6

Zhezkazganetcs, вот тут при проверке в вебмастере что пишет?

Zhezkazganetcs
На сайте с 21.04.2013
Offline
166
Zhezkazganetcs
#7

но страница в поиске яндекса присутствует

Станислав Романенко
На сайте с 05.09.2007
Offline
325
Станислав Романенко
#8

Ну так надо просто подождать, когда робот её выкинет. Это же не мгновенно происходит.

Zhezkazganetcs
На сайте с 21.04.2013
Offline
166
Zhezkazganetcs
#9

ну ok

просто сегодня страниц накинуло, а эти не выпадают

вот решил поинтересоваться может чего не правильно закрыл

maximka77
На сайте с 15.10.2011
Offline
245
maximka77
#10
Zhezkazganetcs:

но страница в поиске яндекса присутствует

Ждите немного, яндекс медлительный

- Базы чатов и каналов Телеграм ( https://base-top.ru/ ) - Недорогие ссылки с форумов (https://cutt.ly/swQDFZWx)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий