- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Есть сайт на движке DLE. Кол-во новостей ~7000. Каждый раз, робот заходит на сайт и начинает перелопачивать все подряд страницы. Пока дойдёт дело до новых страниц, пройдёт неделя, две. Возник вопрос. Если я закрою страницы от робота, которые уже есть в индексе, они пропадут из поиска? Например, есть страницы:
http://сайт.ру/page/1/
http://сайт.ру/page/2/
http://сайт.ру/page/3/
и т.д.
Я закрою http://сайт.ру/page/20/. Страницы, которые будут на странице 21, 22, 23 и т.д. не будут индексироваться роботом?! А останутся ли они в индексе, будут выводиться в поиске?
Ну так проверьте тут: http://webmaster.yandex.ru/wmconsole/public_robots_txt.xml
Ясное дело выпадут, только может не слишком быстро.
У вас наверно последняя дата изменений выдаётся текущим числом - вы отдавайте, по дате новости - тогда он в старьё лезть не должен. Либо карту сайта составьте новую с большим приоритетом у новых новостей.
У вас наверно последняя дата изменений выдаётся текущим числом - вы отдавайте, по дате новости
А это как? Можно поподробнее, пожалуйста?
ElectroD, из нетехнических приёмов - сделайте страницы новых новостей 2УВ (по прямой ссылке с морды), а остальные - только из соответствующего раздела (3 УВ). Второй способ - живой блог со ссылками только на свежие новости.
Если страницу закрыть в роботс, то она рано или поздно вылетит из индекса (скорее рано...). Но зачем такие заморочки? Сделайте чтобы на все новые страницы были ссылки с главной и они проиндексируются очень быстро.
Почитайте насчёт Last-Modified
Поставил модуль "последние новости", посмотрим, что из этого выйдет.
Спасибо за советы.
Я закрою http://сайт.ру/page/20/. Страницы, которые будут на странице 21, 22, 23 и т.д. не будут индексироваться роботом?!
Будут.
Не будет индексироваться дирректория /page/20/.
Есть сайт на движке DLE. Кол-во новостей ~7000. Каждый раз, робот заходит на сайт и начинает перелопачивать все подряд страницы. Пока дойдёт дело до новых страниц, пройдёт неделя, две. Возник вопрос. Если я закрою страницы от робота, которые уже есть в индексе, они пропадут из поиска? Например, есть страницы:
http://сайт.ру/page/1/
http://сайт.ру/page/2/
http://сайт.ру/page/3/
и т.д.
Я закрою http://сайт.ру/page/20/. Страницы, которые будут на странице 21, 22, 23 и т.д. не будут индексироваться роботом?! А останутся ли они в индексе, будут выводиться в поиске?
Выпадут из индекса. Для ваших целей, воспользуйтесь сайтмэпом. В нем можете устанавливать какие страницы нужно индексировать часто а какие нет.
Выпадут из индекса. Для ваших целей, воспользуйтесь сайтмэпом. В нем можете устанавливать какие страницы нужно индексировать часто а какие нет.
А где можно почитать на эту тему более подробно?
Будут.
Не будет индексироваться дирректория /page/20/.
Да, я после создания темы это понял. Тупанул слегка :)
А где можно почитать на эту тему более подробно?
http://yandex.ru/yandsearch?text=sitemaps+%D0%BF%D1%80%D0%B8%D0%BE%D1%80%D0%B8%D1%82%D0%B5%D1%82%D1%8B&stpar2=%2Fh1%2Ftm16%2Fs1&stpar4=%2Fs1&stpar1=%2Fu0