- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Есть в выдаче много мусорных страниц
http://www.site.ru/?search_vrew=on&type_search=10&start_page=81238&id_staff=0
Как в роботсе написать чтобы они не индексировались?
так?
Disallow: /?search_vrew
Да, так.
Если нужные страницы формируются ЧПУ, без параметров (в идеале так и должно быть), то можно запретить все, что содержит параметры:
Disallow: /*?
А теперь мой вопрос))
Терзают смутные сомненья на счет адекватности подобного выражения в роботс.тхт (обратить внимание на звездочки, встречаются 2 раза)
Disallow: /forum/topic.php?forum=*&topic=*&v=l
Да, так.
Если нужные страницы формируются ЧПУ, без параметров (в идеале так и должно быть), то можно запретить все, что содержит параметры:
Disallow: /*?
Это в идеале... А в реале - запретите посковый модуль сайта к индексации
Disallow: /*?search*
... и другие технические модули.
Disallow: /*?search*
звездочка на конце какой цели служит?
звездочка на конце какой цели служит?
Для того чтобы такие как Вы придрались к такому, совершенно безобидному в данном случае символу. И имели возможность показать свои гениальные познания.
nik_kent,
если вы готовы в своих проектах множить неграмотные конструкции - за ради бога.
стилистические ошибки есть ошибки, которые важны в масштабах проекта (или многих проектов, в случае с компанией). есть смысл поработать программистом в большой команде, чтобы понять это
множить неграмотные конструкции
ошибки есть ошибки
Где ошибка? Почитайте вот на досуге:
Disallow: /cgi-bin* # блокирует доступ к страницам начинающимся с '/cgi-bin'
Disallow: /cgi-bin # то же самое
P.S. Интересно, Вы за исправление таких "технических проблем" берете деньги с тех, кто у Вас аудит заказывает?
я не стану вступать в полемику с человеком, который банально не понимает смысл слов, которые ему пишут.
если вам интересно - вы можете свой интерес совсем недорого развеять, все указано в теме которую вы уже успели прочитать.
я не стану вступать в полемику с человеком, который банально не понимает смысл слов, которые ему пишут
Т.е. даже прочитав хелп, Вы не смогли понять, что звездочка на конце это не ошибка и не неграмотная конструкция? Или боитесь признать свою ошибку?
можете свой интерес совсем недорого развеять
Не настолько интересно, чтобы дарить Вам за это деньги. Мои сайты в ТОПе и останутся там, даже если я наставлю звездочек в конце каждой строки роботса.