- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Доброго времени суток.
Подскажите правильно ли я сделал что в роботе закрыл левые ссылки.
Поясню: сайт библиотека sanctuarium.info
Файл robots:
User-agent: *
Disallow: */cache*
Disallow: */compare*
Disallow: *?sort*
я запретил следующие ссылки:
http://sanctuarium.info/10-knig-o-sa...jan&order=ASC/ - ссылка с сортировкой
http://sanctuarium.info/product/compare&book=20828/ - на сайте есть читалка, работает на java script по ссылке открывается не корректно
cache - это закешанные картинки (обложки книг) они переодически удаляются.
Вопрос, может не стоит все запрещать, после создания робота у меня из поиска выпало 3000 страниц было 7000 стало 4000, важно ли для ранжирования количество страниц на сайте, пусть даже не имеющих ценности для пользователя.
P.S. гуру роботописания, может что то нужно добавить в файл?
Для WP делаю такой робот
User-agent: Mediapartners-Google
Disallow:
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-content/cache
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: */comment-page-*
Disallow: /tag/
Disallow:/*page
Host: урл сайта без например yandex.ru
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-content/cache
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /author
Disallow: */trackback/
Disallow: /?s=
Disallow: /*page
Disallow: /tag/
Disallow: */comment-page-*
Disallow: */comments/
Sitemap: http://урл сайта/sitemap.xml
> важно ли для ранжирования количество страниц на сайте, пусть даже не имеющих ценности для пользователя
В вашем вопросе содержится ответ. Если страницы не имеют ценности для пользователя, то они не только бесполезны, но и вредны.
Правильно, но поисковики сейчас тоже не глупые, поэтому выкидывают со временем весь мусор из своей выдачи.
страницы не имеющие ценности для посетителя нужно закрывать от индексаци