- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Это значит:
1) такого файла нет
2) на сервере некорректно обрабатывается отсутствие документа, должен быть код 404.
вот что он мне написал: "Сервер вернул код ошибки 301"
Сделайте отдельные файлы robots.txt для url с www и без www.
При вводе http://formens.ru/robots.txt/
вот такое содержание:
User-agent: *
Disallow:
Сайт: http://formens.ru
Что посоветуете сделать? нужно чтобы индексировалось всё содержимое сайта во всех поисковиках.
При вводе http://formens.ru/robots.txt/
Исправьте .htaccess, так что бы в урле после robots.txt не шел бекслеш /. Иначе поисковики не воспримут данный файл.
Что посоветуете сделать? нужно чтобы индексировалось всё содержимое сайта во всех поисковиках.
Либо исправить настройки сервера, либо вообще его не выкладывать (в файле все равно ничего нет). Но лучше изменить настройки.
Содержимое .htaccess:
# BEGIN WordPress
<IfModule mod_rewrite.c>
RewriteEngine On
RewriteBase /
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule . /index.php [L]
</IfModule>
# END WordPress
Что поправить?
Что поправить?
А не проще положить в корень сайта файл robots.txt?
P.S. Эти записи в файле .htaccess, если запрашиваемый документ не является каталогом или файлом, переправляют запрос на index.php
Нужны ли они вообще? В вашем случае?
Иногда достаточно, вместо этих всех строк, всего одной, например:
ErrorDocument 404 http://www.site.ru/
какое содержание сделать файла robots.txt?
в обычном текстовом формате?
какое содержание сделать файла robots.txt?
в обычном текстовом формате?
User-agent: *
Disallow:
Всё разрешено индексировать.
Напишите в блокноте и сохраните, как файл robots.txt и положите его туда, где файл index лежит, в корень сайта.
P.S. Если файл /robots.txt пустой (чистый), поисковый робот будет работать по своему алгоритму.
P.P.S. Если значение Disallow не указано (как в моём примере), то это означает, что разрешено индексировать все дерево каталогов сайта.
стандарт исключений для роботов по русски
всё сделал. спасибо за конструктивные советы.
Теперь Я. пишет: данный робот ничего не запрещает.