- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Смотрю в разделе Индексирование Яндекс Вебмастера
И что там пишут?
Аддурилка говорит что сайт успешно добавлен. По мере обхода робота он будет проиндексирован и станет доступным для поиска.
З.Ы.
Disallow: *?sort
Для таких вещей Clean-param можно использовать.
Стандартный вариант, все остальное зависит от доработок и модификации.
User-Agent: *
Disallow: /pricelist/
Disallow: /search/
Disallow: /*sort=*
Disallow: /auth/
Disallow: /cart/
Disallow: /glav/
Disallow: /checkout/
Disallow: /feedback/
Disallow: /installer/
Disallow: /login/
Disallow: /logout/
Disallow: /myaccount/
Disallow: /contact_info/
Disallow: /address_book/
Disallow: /order_history/
Disallow: /address_editor/
Disallow: /order_status/
Disallow: /published/SC/html/scripts/
Disallow: /published/wbsadmin/
Disallow: /register/
Disallow: /remind_password/
Disallow: /*view=*
Disallow: /*/reviews/
P.S. Найдите 10 отличий.
к примеру, беру эту ссылку. Никаким правилом она не закрыта и при проверке в Яндекс Вебмастере пишет что она разрешена
Учитесь читать и думать о том, что Вам пишут, ибо ответ тут
Была такая ерунда с одним сайтом, написал письмо в Платонам.
Ответ: Дело в том, что 10.11.10 робот нашел в robots.txt вашего сайта директивы,
которые запрещали его индексирование. В данный момент эти директивы удалены,
но после робот обнаружил, что главная страница вашего сайта отдает роботу код
перенаправления, поэтому он не смог проиндексировать сайт.
Сейчас перенаправление снято. Робот должен будет начать индексировать сайт в
ближайшее время. Подождите, пожалуйста, немного.
Аналогичная ситуация с индексацией нескольких сайтов, причем на сайтах robots.txt вообще отсутствовал, отдавал 404 ошибку.
Вебмастер же говорит, что сайт запрещен к индексации именно в robots.txt.
Создали robots.txt, с парой директив, что бы просто был. Робот на сайт заходит часто, а ситуацию с robots.txt не спешит исправлять вот уже больше месяца.
Платон молчит, уже и не знаю что делать :(