- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Зачем быть уникальным в мире, где все можно скопировать
Почему так важна уникальность текста и как она влияет на SEO
Ingate Organic
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Привествую, коллеги.
Ситуация такая - новый сайт на английском, его роботс вот http://joxi.ru/brRjGqGCoJ7kr1.
После сжирания сайтмапа гугл пишет -
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.
Может я чего-то не вижу? Где там блокируются урлы? У кого-то был такой прикол?
Возможно роботс недавно менялся и гугл еще не проиндексировал его?
Привествую, коллеги.
Ситуация такая - новый сайт на английском, его роботс вот http://joxi.ru/brRjGqGCoJ7kr1.
После сжирания сайтмапа гугл пишет -
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.
Может я чего-то не вижу? Где там блокируются урлы? У кого-то был такой прикол?
Что в Search Console видно? На какой CMS сайт - нет ли другого файла robots.txt?
Если оставить одну верхнюю и две нижних строки, какой будет результат?
Что в Search Console видно? На какой CMS сайт - нет ли другого файла robots.txt?
Если оставить одну верхнюю и две нижних строки, какой будет результат?
Роботс недавно изменил. Он как раз и был - верхняя + 2 нижние. Как в вебмастере увидел - решил не придумывать велосипед и скопировал с роботса анологичного проекта. Ошибка еще держится(
Роботс недавно изменил. Он как раз и был - верхняя + 2 нижние. Как в вебмастере увидел - решил не придумывать велосипед и скопировал с роботса анологичного проекта. Ошибка еще держится(
Уважаемый. У гугла (прямо таки в Searh Console) есть прекрасный сервис с проверкой доступности страниц по robots.txt
Вбиваете ссылку и оно показывает правило, которое срабатывает и запрещает просматривать. После этого правите сам файл и отправляет гуглу новую версию с последующим обновлением странички консоли.
Тоже самое было у меня. При проверке по страницам всё доступно, но в окне проверки сайтмапа указывает на ошибки. Хз с чем связано.
Недавно сталкивался с похожей проблемой, помогла перегенерация htaccess.
А то что сайт закрыт от индексации, ничего?
Возможно именно по этому и выдает такую ошибку
А то что сайт закрыт от индексации, ничего?
Возможно именно по этому и выдает такую ошибку
это для Яндекса закрыт, а для Гугла открыт ☝
---------- Добавлено 28.09.2016 в 20:26 ----------
нет ли другого файла robots.txt?
это как? 🍿
это как?
Например лежит одно, а по запросу редиректится или генерируется скриптом совсем другое.
это для Яндекса закрыт, а для Гугла открыт
http://www.robotstxt.org/orig.html
Отделите записи для разных User-agent друг от друга пустыми строками