- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
robots.txt:
User-agent: *
Disallow : /gost.php
Disallow : /user.php
Disallow : /log.php
Disallow : /sent.php
Disallow : /news.php
Disallow : /static.php
Disallow : /lider.php
Disallow : /about.php
User-agent: Yandex
Disallow : /gost.php
Disallow : /user.php
Disallow : /log.php
Disallow : /sent.php
Disallow : /news.php
Disallow : /static.php
Disallow : /lider.php
Disallow : /about.php
Host: site.ru
На странице test-robots ввожу свой сайт-www.site.ru а мне на выходе:
Запрещена индексация всех URL, начинающихся с указанных префиксов:
/
Индексация сервера www.site.ru:80 полн. запреще
Может я что-то не понял?
Смущает эта фраза:
Индексация сервера www.site.ru:80 полн. запреще
Попробуйте ввести без www, ведь у вас
Host: site.ru
ввел site.ru ошибки нету выводит:
Данный файл robots.txt ничего не запрещает.
Хотя должен выводить что запрещены определенные страницы.
Странно....
kest131,
Напишите не
Disallow : /user.php
,
а Disallow: /user.php
то есть между Disallow и : БЕЗ пробела
А вообще-то можно было и самому всю инфу найти
первоисточник:
http://www.robotstxt.org/wc/norobots.html
другие сайты:
http://ru.wikipedia.org/wiki/Robots.txt
или на худой конец просто поиск ☝ ☝
http://www.google.com/search?hl=ru&q=robots.txt&btnG=%D0%9F%D0%BE%D0%B8%D1%81%D0%BA&lr=
а Disallow: /user.php
то есть между Disallow и : БЕЗ пробела
Вуаля работает:)
Так я и искал инфу просто во всех примерах написания было Disallow :
Всегда пож-та. :)
Так я и искал инфу просто во всех примерах написания было Disallow :
И где же такие НЕПРАВИЛЬНЫЕ примеры в нете?
И где же такие НЕПРАВИЛЬНЫЕ примеры в нете?
Вот : http://www.seo.su
На странице 5 раз написано: Disallow :
Вот : http://www.seo.su
На странице 5 раз написано: Disallow :
Мораль. Стоит обращаться к более достоверным источникам. Особенно к спецификациям.
Мораль. Стоит обращаться к более достоверным источникам. Особенно к спецификациям.
Ну незнаю может.
Хотя домен seo.ru у меня не вызвал подозрений.
kest131, будьте внимательней -- пригодится. :)
Постом выше был домен seo.su.
А на seo.ru предлагают электронно-лучевую сварку.
kest131, будьте внимательней -- пригодится. :)
Постом выше был домен seo.su.
А на seo.ru предлагают электронно-лучевую сварку.
Точно точно мой косяк :)