Форум Сайтостроение Веб-строительство

Опять robots.txt

TAFF
На сайте с 28.08.2008
Offline
140
TAFF
323

Яша постоянно кушает user'оф (user1234.html user64756.html и.т.д) всех юзеров писать будет тупо :)

Такая конструкция сработает?

Disallow: /user
✓ Администрирование (/ru/forum/494299) | ✓ Домены (/ru/forum/298049) | ✓ Продажа аккаунтов narod.ru (/ru/forum/585347)
FladeX
На сайте с 07.11.2008
Offline
163
FladeX
#1

Да.

User-agent: Yandex
Disallow: /cgi-bin # блокирует доступ к страницам начинающимся с '/cgi-bin'

help.yandex.ru

Услуги посредника на бирже контента: информационные статьи 40₽/1000, «продающие» тексты 50₽/1000. Пишите в личку. Помогаю правильно переехать на https (/ru/forum/973447). Подписывайтесь на мой канал в телеграм: https://t.me/fladex (https://t.me/fladex).
Cranking
На сайте с 30.11.2008
Offline
172
Cranking
#2

TAFF, работает, FladeX, всё верно сказал. Я к сожалению лишь повторюсь.

Аудит сайта и консультации по продвижению и оптимизации. (/ru/forum/568390) Дешевле чем у других форумчан на форуме, много отзывов (моя тема)
stifler_x
На сайте с 19.06.2008
Offline
193
stifler_x
#3

У Яндекса есть такой вот сервис. Почему не можете проверить, будет ли работать ваша конструкция?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий