- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Всем доброго вечера. Бьюсь уже два часа над следующей проблемой, вебмастер гугла не считывает мои 2 сайтмапа, и выдает следующее:
URL, запрещенный файлом robots.txt
При попытке получения доступа к вашему файлу Sitemap возникла ошибка. Убедитесь в том, что Sitemap соответствует нашим правилам и к нему можно получить доступ в указанном местоположении, а затем выполните повторную отправку.
Вот сам robots.txt:
http://samsung-club.net.ua/robots.txt
Расположение сайтмапов
/forum/xmlsitemap.php
/sitemap.xml
Что за беда такая и как побороть?
Скорее всего в написании самого адреса сайтмапа какие-то дефекты - или в именовании файла, или в его урле, который проверяете в вебмастерстулс. Попробуйте переименовать файл (на то же имя), загрузить и посмотреть снова.
Дефектов нет, до этого все было отлично, сайтмап генерируется автоматически движком. Меня смущает именно robots.txt, я в него сегодня добавлял несколько строчек, но они не имеют абсолютно никакого отношения к сайтмапу
sg552 добавил 17.03.2011 в 00:07
Впринципе меня интерисует следующее: почему бот гугла читает раздел инструкций для яндекса, и вероятно ошибка здесь:
Disallow: /*#comment, т.к. решетка - начало коммента. но всеравно, изменил - результат пока тот же. сколько требуется времени чтобы перезагрузить роботс?
Расположение сайтмапов
/forum/xmlsitemap.php
/sitemap.xml
Если именно так и указанно, тогда может какая-то лажа с кодировкой сайтмап?
Всем доброго вечера. Бьюсь уже два часа над следующей проблемой, вебмастер гугла не считывает мои 2 сайтмапа, и выдает следующее:
URL, запрещенный файлом robots.txt
При попытке получения доступа к вашему файлу Sitemap возникла ошибка. Убедитесь в том, что Sitemap соответствует нашим правилам и к нему можно получить доступ в указанном местоположении, а затем выполните повторную отправку.
Вот сам robots.txt:
http://samsung-club.net.ua/robots.txt
Расположение сайтмапов
/forum/xmlsitemap.php
/sitemap.xml
Что за беда такая и как побороть?
robots.txt тут не причем
Если Вы указываете карту сайта по следующему урлу http://samsung-club.net.ua/sitemap.xml
То все верно Гугл говорит, он не может получить доступ в сайтмапу, а именно доступ к адресу
http://samsung-club.net.ua/sitemap.xml тут он получает 301 ответ и его редиректит на адрес
http://samsung-club.net.ua/si%E2%80%8Btem%E2%80%8Bap.%E2%80%8Bxml - и тут он получает 404 ответ
Сайтмепы по тем адресам недоступны!
Расположение сайтмапов
/forum/xmlsitemap.php
/sitemap.xml
Проверьте сначала чтобы у вас открывались они в браузере а потом уже давайте гуглу на съедение когда настроите их доступность.
robots.txt тут не причем
Если Вы указываете карту сайта по следующему урлу http://samsung-club.net.ua/sitemap.xml
То все верно Гугл говорит, он не может получить доступ в сайтмапу, а именно доступ к адресу
http://samsung-club.net.ua/sitemap.xml тут он получает 301 ответ и его редиректит на адрес
http://samsung-club.net.ua/si%E2%80%8Btem%E2%80%8Bap.%E2%80%8Bxml - и тут он получает 404 ответ
а обьясните мне природу данного редиректа? оО Я немножко недопонимаю, если скопировать урл то выдает редирект, если вбить ручками - то все отлично. Дело в том что не первый раз с подобным сталкиваюсь, 2 одинаковых ссылки - по одной 404 и страница ошибки движка, по другой все просто отлично. 😮
А откуда ссылку копировали?
__________________Все посетители живые, не боты. (http://livesurf.ru/promo/80271)
http://samsung-club.net.ua/sitemap.xml, вот так заработало?:)
Настройка сайтов по описанию, фотографиям, без доступа к пациету.... обращайтесь
А откуда ссылку копировали?
Кривой адрес копировал из вебмастера гугла, который брал его из одного из файлов сайтмапа vbulletin.
http://samsung-club.net.ua/sitemap.xml, вот так заработало?:)
Настройка сайтов по описанию, фотографиям, без доступа к пациету.... обращайтесь
Оно и до этого отлично работало.
Меня в данный момент интерисует почему движок DLE может по двум одинаковым ссылкам по одной выдавать 404, по другой отлично все открывать?
sg552 добавил 18.03.2011 в 09:57
Когда мы проверили несколько URL из вашего файла Sitemap, то обнаружили, что файл robots.txt для сайта блокирует доступ к некоторым URL. Если вы не планируете заблокировать некоторые URL, содержащиеся в файле Sitemap, воспользуйтесь нашим инструментом для анализа файла robots.txt, чтобы убедиться в том, что робот Google может перейти по отправленным вами URL. Все доступные URL будут по-прежнему отправляться.
Ссылка: http://samsung-club.net.ua/forum/showthread.php?2-Samsung-S8000-Jet-%EF%BF%BD%EF%BF%BD%EF%BF%BD%EF%BF%BD%EF%BF%BD%EF%BF%BD%EF%BF%BD%C3%A0
Роботс не менял. Что за нафик?
Меня в данный момент интерисует почему движок DLE может по двум одинаковым ссылкам по одной выдавать 404, по другой отлично все открывать?
Приведите здесь эти две одинаковые ссылки.