- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Пришла месага в гугл вебмастерс:
робот Googlebot не может получить доступ к вашему сайту
Число ошибок за последние 24 ч. при попытке робота Googlebot получить доступ к файлу robots.txt: 1. Чтобы исключить сканирование страниц, доступ к которым заблокирован в этом файле, сканирование было отложено. Общая доля ошибок при попытке доступа к файлу robots.txt на сайте: 33.3%.
Собственно
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /component/
Disallow: /index2.php
Disallow: /index.php
Disallow: /*tag
Disallow: /*=atom
Disallow: /*=rss
Disallow: /*.pdf$
Disallow: /*?sl*
Disallow: /itemlist/
Disallow: /tag/
Host: www.MySite.com
Sitemap: http://www.MySite/site-map.xml
В чем может быть трабла, как исправить?
С уважением Ушат
В виду чрезвычайной важности, позволю себе апнутть тему
Сложно так сказать, надо сам роботс смотреть(на сайте).
Возможно хостер забанил айпишник гугловского бота и он теперь не может получить доступ к файлу. В вебмастере можно ведь проверить все директивы и доступность нужных страниц
Сложно так сказать, надо сам роботс смотреть(на сайте).
Возможно хостер забанил айпишник гугловского бота и он теперь не может получить доступ к файлу. В вебмастере можно ведь проверить все директивы и доступность нужных страниц
Страницы доступны , недоступен сам роботс поэтому сканирование отложено
Без адреса сайта трудно сказать
Можно в личку сайт, посмотрю
Без адреса сайта трудно сказать
отправил в личку
Сканирования происходит и без доступности роботса, там что-то про исключения заблокированных страниц говорится
по-ходу вы закрыли от бота весь сайт(возможно в Disallow: /templates/)
- и почему у вас sitemap через дефис (..http://www.MySite/site-map.xml)?
по-ходу вы закрыли от бота весь сайт(возможно в Disallow: /templates/)
- и почему у вас sitemap через дефис (..http://www.MySite/site-map.xml)?
Сайт на Joomla. насколько мне известно TEmplates - шаблон.
а насчет сайт-мапа . Почему бы и нет?
отправил в личку
А ничего не пришло, видимо ограничения по сообщениям