- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте! Заметил, что у моего сайта "повышенная индексация" в Гугле - то есть, при 61 имеющейся записи в индексе находятся 423 страницы, что в общем-то не есть хорошо. Среди страниц присутствуют трекбеки и страницы из фида, хотя в роботсе их индексирование запрtщено, вот как выглядит часть robots.txt для Гугла:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag/
Disallow: /page/
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: /category/
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /?feed=
Disallow: /?s=
Allow: /wp-content/uploads/
Подскажите, пожалуйста, что-то не так в роботсе или ...?
доменное имя в студию
отправляю в ЛС)
1. Зарегистрируйся сайтом в панели вебмастера.
2. СОбери список из 5-10 разнотипных "мусорных страниц" своего сайта (фидбек, трекбек)
3. Проверь отшивает ли их роботс.тхт или нет
На самом деле страницы те не дает роботс индексить (сейчас). Смотреть нужно в сторону как убрать их из зоны видимости. Бороться можно до бесконечности, но лучше сразу выяснить от куда ПС видит ссылки на эти страницы и убрать их.
1. Зарегистрируйся сайтом в панели вебмастера.
2. СОбери список из 5-10 разнотипных "мусорных страниц" своего сайта (фидбек, трекбек)
3. Проверь отшивает ли их роботс.тхт или нет
Все сделал, обнаружил, что роботс блокирует не все страницы - в частности, попадаются страницы из фида.
Все сделал, обнаружил, что роботс блокирует не все страницы - в частности, попадаются страницы из фида.
Фиды закрыты у вас на сколько я смотрю.
И по-моему достаточно только Disallow: */feed/ для стандартных фидов.
Возможно. Не могу сказать, что являюсь большим специалистом в составлении роботса - мзучил несколько статей, пришел к выводу, что такой вариант включает все)
при 61 имеющейся записи в индексе находятся 423 страницы, что в общем-то не есть хорошо
А разве это настолько не хорошо?
А разве это настолько не хорошо?
Да, на столько.