- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Судя по этому данная секция должна запрещать для Яндекса все URL кроме корня сайта
Через панель вебмастера выяснилось, что она разрешает также любые URL заканчивающиеся на слеш: /cat/, /cat/page/
Баг? 0_о
Судя по этому данная секция должна запрещать для Яндекса все URL кроме корня сайта
Через панель вебмастера выяснилось, что она разрешает также любые URL заканчивающиеся на слеш: /cat/, /cat/page/
Баг? 0_о
Похоже на то. Ваш роботс скорее всего интерпретируют как
User-agent: Yandex
Allow: */$
Disallow: /
То есть увидев $ яндекс все равно впихнул звездочку которая должна быть на конце всех строчек без $, но не в конец а в начало.
Можете попробовать так. Криво конечно, но работать должно.
User-agent: Yandex
Disallow: /*/
Allow: /$
Disallow: /
semenov,
Повнимателнее прочтите п.2(сраздел совместное использование), и п.3 этого самого. Allow /$ разрешает всё, что имеет адрес длиннее чем корень, а Дисаллоу / запрещает корень.
PriBoy, Повнимателнее прочтите п.3, вы совершенно не правы.
Похоже на то. Ваш роботс скорее всего интерпретируют как
User-agent: Yandex
Allow: */$
Disallow: /
Вернее как: "Allow: /$" и "Allow: /*/$"
Вернее так:
User-agent: Yandex
Allow: /*/$
Disallow: /
если бы так то главная также была бы запрещена, ведь в ее адресе нет двух слешей необходимых для allow
ИМХО, Да, наверное глупость сморозил.
Действительно странно ...
semenov,
А если написать
Allow /index.php$
Disallow /
если бы так то главная также была бы запрещена, ведь в ее адресе нет двух слешей необходимых для allow
Угу, подправил, только все равно указание части url начинается всегда со слеша +)
semenov добавил 19.02.2008 в 23:59
ИМХО, Да, наверное глупость сморозил.
Действительно странно ...
semenov,
А если написать
Allow /index.php$
Disallow /
/index.php - это не корень сайта
Угу, только указание части url начинается всегда со слеша
Тоже верно. Значит доллар работает не как анонсировано. Спасибо за ценную информацию. Отпишитесь какой вариант яндекс поймет, пожалуйста. Можете попробовать мой кривовариант из первого ответа в этой теме.
Кстати вот вам для тестирования в реальном времени, если вдруг не знали. Взглянуть на роботс глазами яндекса.
semenov,
я понимаю, что не корень. Перечислите остальное ... или там неподъёмно?
PriBoy добавил 20.02.2008 в 00:03
semenov,
я понимаю, что не корень. Перечислите остальное ... или там неподъёмно?
Угу, теперь каталоги тоже запрещены:
Disallow: /*/
Allow: /$
Disallow: /
Вроде как хак для этой баги найден)