- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Есть сайт, CMS которого "плодит" много "левых" ссылок, которые нужно закрыть от индексации. Пошли самым простым путём, т.е. разрешили только "нужные" страницы, а остальные запретили, но вместе с остальными запретилась и главная страница, как разрешить главную страницу.
User-agent: *
Allow: /polistirol.html
Allow: /xingda.html
Allow: /king_pearl.html
Allow: /polietilen.html
Allow: /polypropilen.html
Allow: /xingdazkf-301.html
Allow: /xingdazkf-302.html
Allow: /xingdazkf-303.html
Allow: /reliance.html
Allow: /f-o220-s.html
Allow: /f-o120.html
Allow: /polyvinylchloride.html
Allow: /tianye.html
Allow: /sg3.html
Allow: /sg5.html
Allow: /sg7.html
Allow: /georgia_gulf.html
Allow: /contacts.html
Allow: /office.html
Allow: /72.html
Allow: /95.html
Allow: /96.html
Allow: /noginsk.html
Allow: /about.html
Allow: /production.html
Disallow: /
Allow: /$
см. help.yandex.ru
P.S. Только следите за нововведениями, скоро использование директив изменится.
Спасибо за помощь.
Вот написал роботс, для яши, т.к. Яша упорно не хочет идти в раздел блог моего магазина, не подскажете не переборщил ли я ? Или может что не так написал?
User-Agent: *
Disallow: /cgi-bin
Host: www.silver-mania.ru
Disallow: /index.php?
Disallow: /?
Disallow: /printable.php?
Disallow: /admin.html
Disallow: /cart.html
Disallow: /wide_search.html
Disallow: /feedback.html
Disallow: /compare.html
Disallow: /*_offset_0.html
Allow: /articles/
Allow: /interesnoe/
Allow: /nashi-brendy/
Allow: /nashi-partnery/
Allow: /jewellery-collections/
Allow: /yuvelirnye-novosti/
Allow: /jewellery-shape/
Allow: /product*
Allow: /show_news*
упорно не хочет идти в раздел блог моего магазина
Когда появилась первая запись в блоге? Сколько уже недель или месяцев робот "не хочет" туде идти?
просто это магазин на cms, а к нему мы прикрутили блог на wordpress, а не заходит давно месяц уже (
Xammer2000, вы не видите мои вопросы? ОК, попробуем еще:
1. Когда появилась первая запись в блоге?
2. Как вы контролируете заходы робота, логи?
Извините за задержку
2. Как вы контролируете заходы робота, логи?
- первая запись в блоге появилась 30.07/2011
- робота контролирую через яндекс вебмастер