- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу

Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Всем привет!
Добавил вчера сайт в яндекс вебмастер, сегодня пришло письмо в виде фатальной ошибке о запрете индексации в robots.txt:
Вопрос: не могли бы сказать где ошибка в файле?
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /archives/
Disallow: /category/
Disallow: /search/
Disallow: /page/
Disallow: /tag/
Disallow: /xmlrpc.php
Allow: /wp-content/uploads
Host: https://mydomain.ru
Sitemap: https://mydomain.ru/sitemap.xml
И где он увидел директиву Disallow: / ?
Спасибо!
...
И где он увидел директиву Disallow: / ?
Спасибо!
попробуйте заменить на
https://yandex.ru/support/webmaster/robot-workings/allow-disallow.html#allow-disallow__asterisk-dollar
попробуйте заменить на
https://yandex.ru/support/webmaster/robot-workings/allow-disallow.html#allow-disallow__asterisk-dollar
Я посмотрел эту ссылку, там ничего особенного нет,
/*?* - фактически запрещает параметаризацию запроса, как это связано с Disallow: / непонятно
Я посмотрел эту ссылку, там ничего особенного нет,
/*?* - фактически запрещает параметаризацию запроса, как это связано с Disallow: / непонятно
Чтобы отменить * на конце правила, можно использовать спецсимвол $, например:
Ваша строчка Disallow: /*?* равнозначна строке Disallow: /
Ваша строчка Disallow: /*?* равнозначна строке Disallow: /
Его строчка равна Disallow: /*? - то есть любая строка с вопросительным знаком. Чушь писать не надо.
/любая последовательность с +"?" + любой набор символов - в принципе логично.
или здесь ошибка или последняя звездочка не нужна ?
похоже на любую категорию или страницу, которая требует параметров или как вариант POST запроса через "?"
Да это возможно, но это допускает /*?* или /*? - что должно быть запрещено ? или я ошибаюсь?
- это правильный вариант , яндекс не будет его ассоциировать с Disallow: / ?
Не будет. Чего у вас там произошло, я не знаю, но это явно ни при чем.
Ок, написал в поддержку, спрошу у них в чем дело.
---------- Добавлено 11.10.2019 в 17:55 ----------
Да, забыл спросить о главном, в моем случает Disallow: /*?* на Disallow: /*? нужно менять ?
В вебмастере в инструментах "Анализ robots.txt" проверь свой роботс
Ответ от поддержки яндекс:
Disallow: /
Запрет был установлен с 2019.09.27 23:33:14 по 2019.10.09 в 14:53:14 включительно. Если ранее вы самостоятельно не ограничивали доступ к вашему сайту, то для выяснения причин размещения запрета в robots.txt рекомендую вам связаться с администратором сайта или сервера, на котором он находится.
Сейчас запрет уже отсутствует, поэтому сайт беспрепятственно посещается роботом и сможет вернуться в поиск с последующими обновлениями поисковой базы. На это потребуется около двух недель. Когда сайт будет проиндексирован, предупреждение в Яндекс.Вебмастере сможет пропасть автоматически.
С уважением, Платон Щукин
Служба поддержки Яндекса
Ответ от поддержки яндекс:
Ну то есть это было ещё в период разработки сайта, до того, как появилась эта тема. Много шума из ничего.