- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Подскажите, плиз, что это значит?
В роботсе прописано:
User-agent: *
Disallow: /
Почему яндекс дал такой результат?
значит, на сайте присутствует данный файл с этим контентом.
бр........ ща только дошло, что не понимаю смысла вопроса... :)
значит, на сайте присутствует данный файл с этим контентом.
бр........ ща только дошло, что не понимаю смысла вопроса... :)
Ну так запрет же стоит на индексацию всего сайта всеми поисковиками!
Как он мог найти страницу с таким контентом?
culver добавил 16.07.2009 в 18:20
потёрто.....
Что значит?
В общем, повторяю вопрос.
Сайт запрещен на индексацию полностью для всех поисковиков!
Но при этом Яндекс в резльтатах выдачи дал следующее: Сайт site.ru находится на стадии разработки. This site is under construction!
Как такое могло получиться?
Адрес сайта и дату установки robots.txt в студию.
Адрес сайта и дату установки robots.txt в студию.
ortho-m.ru
сайт перенесен с другого доменного имени, роботс прописан был сразу.
В роботсе прописано:
User-agent: *
Disallow: /
culver добавил 16.07.2009 в 19:01
Товарищи, помогите, пожалуйста. Поделитесь опытом
Может быть раньше на домене висела заглушка без robots.txt, вот Яндекс ее и проиндексировал.
Может быть раньше на домене висела заглушка без robots.txt, вот Яндекс ее и проиндексировал.
Сорри за глупый вопрос, что значит висела заглушка?
Под это определение подходит, что доменное имя было создано, но на нем ничего не было, в том числе и роботса?
Давно замечено, что Яндексу часто бывает пофигу на роботс. Если Вы хотите выкинуть сайт из индекса, добавляйте в веб-мастер и удаляйте ручками.
Сорри за глупый вопрос, что значит висела заглушка?
Под это определение подходит, что доменное имя было создано, но на нем ничего не было, в том числе и роботса?
Домен зарегистрирован 2 июня. Дата изменения файла robots.txt - 14 июля, т.е. он никак повлиять еще не мог. Осталось выяснить, что висело на месте сайта больше месяца. С вероятностью 99% это была заглушка хостера, которая показывает, что домен есть, а сайт пока не размещен.
В таких случаях robots.txt можно выкладывать не тогда, когда сайт будет готов, а как только у вас появился доступ к хостингу, тогда ничего лишнего проиндексировано не будет.
Более серьезная опасность в том, что заглушка на всех доменах одного хостера одинаковая, поэтому Яндекс может склеить ваш домен с каким-то другим, а расклеивать их гораздо дольше, чем индексировать с нуля.
Вашу заглушку пока еще можно лицезреть в сохраненной копии страницы в Яндексе.
Домен зарегистрирован 2 июня. Дата изменения файла robots.txt - 14 июля, т.е. он никак повлиять еще не мог. Осталось выяснить, что висело на месте сайта больше месяца. С вероятностью 99% это была заглушка хостера, которая показывает, что домен есть, а сайт пока не размещен.
В таких случаях robots.txt можно выкладывать не тогда, когда сайт будет готов, а как только у вас появился доступ к хостингу, тогда ничего лишнего проиндексировано не будет.
Более серьезная опасность в том, что заглушка на всех доменах одного хостера одинаковая, поэтому Яндекс может склеить ваш домен с каким-то другим, а расклеивать их гораздо дольше, чем индексировать с нуля.
Вашу заглушку пока еще можно лицезреть в сохраненной копии страницы в Яндексе.
Оке, спасибо, понято!