- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
доступ к запрошенному URL-адресу по какой-то причине запрещен. Ввиду чего системе не удаётся получить данные о мета-тегах и заголовках. что можно с этим сделать? по какой причине это происходит?
приклыдваю robots txt
User-agent: *
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: *openstat=
Disallow: *yclid=
Disallow: *gclid=
Disallow: *utm_campaign=
Disallow: *utm_source=
Disallow: *utm_medium=
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
User-agent: bingbot
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: *openstat=
Disallow: *yclid=
Disallow: *gclid=
Disallow: *utm_campaign=
Disallow: *utm_source=
Disallow: *utm_medium=
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
Crawl-delay: 10
User-agent: YandexBot
Disallow: /api
Disallow: /stats
Disallow: /links
Disallow: /demands
Disallow: /*products_region=
Disallow: /*xls
Disallow: /*request
Disallow: /go?to=
Disallow: /dashboard
Disallow: /predl?*q=*
Disallow: /about/terms
Disallow: */ajax
Disallow: /*preview=
Disallow: /*q=
Disallow: /*imageview
Disallow: /users
Disallow: */order
Disallow: /toolbar
Disallow: *open_orders_chat
Disallow: *intruder
Disallow: *?order=
Disallow: *?ya_openstat=
Disallow: *?print=
Disallow: *?filter=
Disallow: *?set_limit=
Disallow: *?regions=
Disallow: *?k50id=
Disallow: *?synonym_path=
Disallow: *price_min
Disallow: *price_max
Clean-param: gclid&yclid&aw_openstat&ay_openstat&_openstat&utm_campaign&utm_medium&utm_source
User-agent: heritrix
Disallow: /
Host: http://www.ufa-opalubka.ru
Sitemap: http://www.ufa-opalubka.ru/sitemap.xml
приклыдваю robots txt
Можешь ещё подорожник приложить. Эффект будет такой же.
А сама страница открывается?
Можешь ещё подорожник приложить. Эффект будет такой же.
Да хоть корень Имбиря готова приложить - объясните где кроется запрет
https://webmaster.yandex.ru/tools/robotstxt/
Тут можно проверить заблокирована ли страница роботсом и какой директивой.
Хост - эту директиву можно убрать уже как 2 года не поддерживается, тем более все равно у вас она неправильно написана))
А сама страница открывается?
да, открывается сайт.
Да хоть корень Имбиря готова приложить - объясните где кроется запрет
Кофейной гущи не успел заварить, гадать не на чем.
Какой адрес не работает?
https://webmaster.yandex.ru/tools/robotstxt/
Тут можно проверить заблокирована ли страница роботсом и какой директивой.
Хост - эту директиву можно убрать уже как 2 года не поддерживается, тем более все равно у вас она неправильно написана))
не поняла, по ссылке идет просто анализ роботс - а где именно "собака зарыта" чтобы указать программистам что изменить -не могу понять.
Потом надо ввести проблемный урл и покажет, закрыт или нет
где именно "собака зарыта" чтобы указать программистам что изменить -не могу понять.
Программисты смогут, если с ними поговорите по существу, а не загадками, как в этой теме.
https://webliberty.ru/wp-content/uploads/2010/10/Analiz-robots.txt-v-YAndeks.png