- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Всем привет!
Сегодня полез в webmaster чтобы посмотреть что там твориться...
Заглянув в ошибки обнаружил сл. ошибку: Документ запрещен в файле robots.txt, попало где-то 30% основных страниц которые заточены под СЧ
Причем, robots.txt содержит, если смотреть как по webmaster так и по самому файлу:
User-agent: Yandex
Disallow:
Host: site.com
User-agent: *
Disallow:
Проверил результаты поиска, действительно, страниц нет в выдаче.
Что за глюк, есть у кого-то подобное?
Таких глюков не наблюдал, но по роботсу могу сказать одно:
Инструкция для всех ботов должна стоять первой, инструкция для Я.бота — второй.
Таких глюков не наблюдал, но по роботсу могу сказать одно:
Инструкция для всех ботов должна стоять первой, инструкция для Я.бота — второй.
Спасибо за подсказку, заменю, но все равно, это не то, что должно запретить к индексации страницы.
Напишите лучше так:
User-agent: Yandex
Allow: /
Host: site.com
Kirik, правильно mhz заметил, записи надо местами поменять иначе например гугл нижнюю запись не прочтет (хотя она в вашем варианте не нужна, вы там все равно ничего не запрещаете), гуглу не понятна директива host и поэтому вторую запись проигнорирует, а в остальном все правильно записано, хотя идеальный вариант - как советует Playmаn в любом случае странно почему Я показались запрещенные к индексации страницы
Использование robots.txt