- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Посмотрел на сайте роботс - там такие строки
User-agent: Yandex
Disallow:
Host: www.site.ru
как я понимаю эта директива запрещает яндексу доступ ко всему сайту, но почему то текста размещенные на сайте, нормально индексируются.
и вообще, если честно, не понимаю, зачем это все в роботсе, подскажите пожалуйста, для чего эти секции здесь прописаны, кто-то до меня их писал...
User-agent: Yandex
Disallow:
Host: www.site.ru
User-agent: Googlebot
Disallow:
User-agent: StackRambler
Disallow:
User-agent: Aport
Disallow:
User-agent: Mail.Ru/1.0
Disallow:
User-agent: *
Disallow: /
как я понимаю эта директива запрещает яндексу доступ ко всему сайту, но почему то текста размещенные на сайте, нормально индексируются.
Справку Яндекса читать не пробовал?
Справку Яндекса читать не пробовал?
несколько раз прочитал, и что?
несколько раз прочитал, и что?
Disallow: не запрещает доступ ко всему сайту.
Посмотрел на сайте роботс - там такие строки
User-agent: Yandex
Disallow:
Host: www.site.ru
как я понимаю эта директива запрещает яндексу доступ ко всему сайту
Эта секция ничего Яндексу не запрещает, справку читать пробывали? http://help.yandex.ru/webmaster/?id=996567 ;)
tuborg, чтобы сайт не индексировался достаточно написать
Посмотри тутЁhttp://www.youtube.com/watch?v=OGWrAPpEZ1Q&feature=player_embedded
Тож вопросик по Роботс:
Если в вордпресе(да и не только) прописать в роботсе:
Disallow: /*?*
Disallow: /*?
То как я понял http://www.сайт.ру/content.php?page_id=1 - не будет индексироваться, а http://www.сайт.ру/?page_id=1 будет, верно?
Если в вордпресе(да и не только) прописать в роботсе:
Disallow: /*?*
Disallow: /*?
Это как бы абсолютно одинаковые записи.
То как я понял http://www.сайт.ру/content.php?page_id=1 - не будет индексироваться, а http://www.сайт.ру/?page_id=1 будет, верно?
Обе.
ЗЫ Справку Яндекса читать не пробовал? (с)
Обе.
ЗЫ Справку Яндекса читать не пробовал? (с)
Что обе?) Обе будут или обе не будут?)
з.ы. Пробывал, как видишь не помогло))
Что обе?) Обе будут или обе не будут?)
Там типа проверить можно. Не пробовал? (С)