- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу

Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов

VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Нужно продвинуть станицу сайта по адресу
http://sait.ru/suvenirnoe_oruzhie.htm
Но есть так же страницы-клоны, где дублируется контент продигаемой страницы вида
http://sait.ru/index.php?categoryID=417&sort=Price&direction=DESC
http://sait.ru/index.php?categoryID=417&sort=Price&direction=ASC
Как запретить к индексации страницы с index.php?categoryID=417&sort=Price&direction=ASC
User-agent: *
Disallow: /ndex.php?categoryID*
Host: sait.ru
Disallow: /index.php?categoryID*
Disallow: /index.php?categoryID* - звездочка не имеет смысла. в конце и так считается звездочка, т.е. все страницы начинающиеся с этих символов
User-agent: * - в эту секцию нет смысла писать расширенный синтаксис, его далеко не все поддерживают
так что делите ваш роботс на три одинаковых блока - для яндекса, гугла (не поддерживает директиву хост) и *
если уж использовать *, то я бы закрывал скорее сортировку, чем вообще все категории.
итого для яндекса
User-agent: Yandex
Disallow: /*direction=
А как для закрытия календарей и архиов?
тоже самое было.
Я прописал в роботс.тхт:
Disallow: /index.php?*direction=
С этим проблем нет больше.
Еще на сайте вебасиста посмотрите инструкции. Там про этот тип глюков написано. Яша заходит на продвигаемую страницу, потом воспринимает сортировку по цене или имени как ссылку на другую страницу, заходит по ней, хавает эту страницу считая ее новой. А контент то там такой же - только товары на странице в другом порядке. Поэтому и дубль.