- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Как ни странно,
Disallow: /users
Открою страшную тайну. Чтобы запретить индексацию страницы, нужно написать ее адрес после директивы Disallow (и ничего не дописывать в конце ее адреса!).
Kost не могу фиды страниц закрыть (сайт.ру/урл страницы/feed/
, лезут и всё да и не только они...Уже просто не знаю в чём дело... Может поможете?!
По поводу того что лезет user, вылезла похожая страница function.include
Disallow: /function.include - так не получилось закрыть
Disallow: */function.include - так сработало, если что можете попробовать с user.
Yvan добавил 29.08.2011 в 19:00
Понял, всего лишь убрать косую.
Да есть страницы, аля "site.ru/pravila.html", "site.ru/o-proekte.html" и т.д. Ссылки на них есть на главной странице, а мне их закрыть нужно! Теперь ясно, что нужно не так
Disallow: /passremind.html/
Disallow: /pomosch.html/
Disallow: /my.html/
Disallow: /pravila.html/
Disallow: /kontakty.html/
Disallow: /o-proekte.html/
А вот так
Disallow: /passremind.html
Disallow: /pomosch.html
Disallow: /my.html
Disallow: /pravila.html
Disallow: /kontakty.html
Disallow: /o-proekte.html
Я правильно все понял?!
Конечно! Слэшь после html вообще не понятно что, 1000% таких страниц нет в природе - точней не было до Вас)))
не могу фиды страниц закрыть (сайт.ру/урл страницы/feed/
Вам кто-то не разрешает, или что?
Откройте наконец http://help.yandex.ru/webmaster/?id=996567 . Откройте FAQ этого раздела, там есть все нужные ссылки. Читайте.
Disallow: /*/feed
Хватит тупить на форуме, изучайте матчасть, сколько уже можно?
А еще вопрос, а с юзерами, что делать?
Как правильно?
Disallow: /users/
Disallow: /users
или просто?
Disallow: /users
Ведь на сайте страниц начинающих с users тысячи!
"или просто"
Вам кто-то не разрешает, или что?
Откройте наконец http://help.yandex.ru/webmaster/?id=996567 . Откройте FAQ этого раздела, там есть все нужные ссылки. Читайте.
Disallow: /*/feed
Хватит тупить на форуме, изучайте матчасть, сколько уже можно?
У меня в гугл... Ладно, спасибо за наводку, надеюсь Disallow: /*/feed сработает...
У меня в гугл...
Без разницы кроме директивы Host:
Без разницы кроме директивы Host:
Понятно, ещё раз спасибо!
или просто?
Disallow: /users
Ведь на сайте страниц начинающих с users тысячи!
http://www.robotstxt.org/orig.html
The value of this field specifies a partial URL that is not to be visited. This can be a full path, or a partial path; any URL that starts with this value will not be retrieved.
http://help.yandex.ru/webmaster/?id=996567
#начинающимся с '/cgi-bin'
# и '/example.html'
ivmas, НУ НЕЛЬЗЯ ЖЕ ТАК ТУПИТЬ !!!