- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу

Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Всем добрый день. Вот эта страница http://exitgames.ru/news/ispyitay-na-sebe-kvsetyi-v-realnosti в Google закрыта от индексации. Google пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt. " вот robots.txt http://exitgames.ru/robots.txt
Никак не пойму где в robots.txt эта страница закрыта.
Всем заранее спасибо всем тем кто поможет.
У тебя нет этой странице в выдаче, но есть другая:
http://exitgames.ru/news/ispyitay-na-sebe-kvsetyi-v-realnosti/feed
А в robots.txt у тебя есть правило, запрещающее индексировать страницы содержащие /feed
Да, это так в robots.txt feed закрыт. Но это стандартное правило для robots.txt сделаных на вордпресс. Например у http://ktonanovenkogo.ru/ тоже feed закрыт http://ktonanovenkogo.ru/robots.txt
Дело не в роботс, у вас проблема с индексацией.
Всем добрый день. Вот эта страница http://exitgames.ru/news/ispyitay-na-sebe-kvsetyi-v-realnosti в Google закрыта от индексации. Google пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt. " вот robots.txt http://exitgames.ru/robots.txt
Никак не пойму где в robots.txt эта страница закрыта.
Всем заранее спасибо всем тем кто поможет.
Может быть глюк гугла.
Удалите по 3-4 строки и проверяйте индексацию.
Как только найдете нужный блок , тогда добавляйте по 1-2 команды и смотрите.
Может быть так, что после того, как удалите и скопируете обратно теже команды все будет ок.
ссылка открыта для индексации.
почему же?
в Google закрыта от индексации
В гугле, закрывают от индексации только метатегами. В роботс, закрывают от сканирования.
Как только метатегами закроете и откроете в роботс так сразу надпись исчезнет.