- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
сабж, как правильно прописать файл?
Наверное, так:D.
iventiva,
коллега master_jeday, вам правильно подсказал, но я делал так:
и все работало.
User-agent: *
Allow: /index.php
Disallow: /
Я тоже думаю так, но начал размышлять. Паук заходит видит открытую index, а потом запрет всего — уходит не индексируя вообще
fivefinger, а если морда такая: site.ru (без мусора после слэша)?
master_jeday добавил 09.02.2011 в 16:17
Я тоже думаю так, но начал размышлять. Паук заходит видит открытую index, а потом запрет всего — уходит не индексируя вообще
Если Allow стоит перед Disallow, то все будет хорошо:). Ежели сначала указан Disallow, потом Allow, то да - весь сайт будет запрещен к индексации.
User-agent: *
Allow: /$
Disallow: /
Только так и никак по-другому)
master_jeday, /*/$ - это разве морда? Это _site.ru/bla/
fivefinger, index.php - это хреновая морда
/*/$ - это разве морда? Это _site.ru/bla/
Да, я ошибся. У Вас правильный вариант, ибо морда вот: "/".
Хых, пока не увидел ничего похожего, вообщем это был курс каширина =))
/a
/b
...
/z
/0
/1
...
/9
Там еще
знаки разные
/$
/?
вообщем все не помню =)))
А если нужно, открывать разделы по очереди, то так:
Allow: /$
Allow: /news/
Disallow: /
следующий раздел:
Allow: /$
Allow: /news/
Allow: /state/
Disallow: /
и.т.д ?
User-agent: *
Allow: /$
Disallow: /
Только так и никак по-другому)
Самый правильный вариант!
А если нужно, открывать разделы по очереди, то так:
Allow: /$
Allow: /news/
Disallow: /
следующий раздел:
Allow: /$
Allow: /news/
Allow: /state/
Disallow: /
и.т.д ?
Да
User-agent: *
Disallow: /
- так тоже будет работать