- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Cherny, по идее вставлять надо программистам, пишущим роботов, плюющим на robots.txt :)
dimok, а может и не мы подсовываем, а кто-то ещё... да и при чём здесь это? Я к тому, что результаты поиска для поисковых систем - ненужный хлам, страницы с информацией проиндексируются и без оных. Поэтому что за случайную, что за преднамеренную индексацию таких страниц могут последовать меры. Но вызваны они будут они не тем, что сайт посчитают спамом, а тем, что просто поисковики будут чистить свои индексы от ненужных страниц.
За такое, по идее, Яндекс сам себе должен вставить за несоблюдение самим же собой файла robots.txt :)
А как поисковики отлавливают такие страницы или они их вообще отказываются индекировать?
Руками.
Смотрим http://catalog.begun.ru/robots.txt:
Disallow: /
От индексации всё закрыто. Для вашего примера можно просто Disallow: /search.php
Все, понял. Еще вчера я так и думал. Но после прочтения этой темы вновь закрались сомнения...
EvgRen, не всегда.
У программиста есть ТЗ, которого он должен придерживаться. Программист должен задать вопрос, почему ТЗ не придерживается общих рекомендаций, а вот что будет дальше, от программиста может не зависеть.
В случае с Яндексом некоторые сервисы роботами не считаются. "Лечится" это выдачей Access Denied для D и закладочника, не припомню его имени. ;)
Хмммм..., недавно же говорили, что Яндекс не вводит санкции на сайты со словами id в урле.
Для слова search - введены исключения??
Надо это админам Гугла рассказать :)
SYNPHARA, вы чего-то не поняли. Речь идёт о результатах поиска, как там файлы называются - не важно.
Хммм, простите.
Так выходит, что если хочешь чтобы тебя проиндексировали - никогда в динамике не используй слово search в урле?????
Хм, а я такие сайты (сайты, не каталоги) видел!
Бедные.
Ага. Может это Брин на разборки с Яндексом приезжал?! :D
Ладно, пора заканчивать этот флейм.