Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Robots.txt

A0
На сайте с 14.03.2016
Offline
34
Anton 007
578

Здравствуйте.Создаю текстовый файл под названием robots.txt.Загружаю в папку publik_html но вебмастер гугле его не видит.Файл robots.txt не найден.Что за проблема?ведь не первый день замужем и понимаю,что такое корень сайта

Maxim-KL
На сайте с 26.01.2011
Offline
350
Maxim-KL
#1

Anton 007, А в браузере он нормально открывается site.ru/robots.txt ???

Мои услуги по прогонам: ✅Качественный ручной статейный прогон по базе сайтов с ИКС10+ (maximgroups.net/progon-statejnyj) ✅Прогон Максимум - Все включено, 300+ качественных ссылок (maximgroups.net/progon-maksimum)
A0
На сайте с 14.03.2016
Offline
34
Anton 007
#2
Maxim-KL:
Anton 007, А в браузере он нормально открывается site.ru/robots.txt ???

Да .И в вебмастере яндекса все нормально.Вебмастер гугла не видит Вот в браузере http://vopros-otvet.online/robots.txt

OO
На сайте с 21.08.2012
Offline
32
OVO
#3
Anton 007:
Да .И в вебмастере яндекса все нормально.Вебмастер гугла не видит Вот в браузере http://vopros-otvet.online/robots.txt

К чему пустое поле Disallow?

Попробуйте сразу после User-agent убрать строку с пустым Disallow и вместо неё добавить Allow: /

Marti7856
На сайте с 16.02.2010
Offline
134
Marti7856
#4

Какое сообщение выдает Search Console при попытке отправить файл роботс?

Если вы путешествуете, возможно Вас заинтересует гид (https://dreamguide.world/countries/) на русском языке!
Marmeladov
На сайте с 19.05.2011
Offline
60
Marmeladov
#5

а Инструмент проверки файла robots.txt в Search Console что показывает? Добавляли там его?

A0
На сайте с 14.03.2016
Offline
34
Anton 007
#6
Marmeladov:
а Инструмент проверки файла robots.txt в Search Console что показывает? Добавляли там его?

файл роботс не найден ошибка 404

---------- Добавлено 24.12.2016 в 01:04 ----------

Marmeladov:
а Инструмент проверки файла robots.txt в Search Console что показывает? Добавляли там его?
Файл robots.txt не найден(404)

---------- Добавлено 24.12.2016 в 01:11 ----------

Marmeladov:
а Инструмент проверки файла robots.txt в Search Console что показывает? Добавляли там его?
Все .нашел.Спасибо

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий