- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Сейчас robots.txt такой
User-Agent: Yandex
Disallow: /admin
Disallow: /emarket/addToCompare
Disallow: /emarket/basket
Disallow: /go_out.php
Crawl-delay: 10
Sitemap: http://abc.ru/sitemap.xml
1. Мне непонятно что запрещают строки (может все данные, которые содержатся для заказа с сайта?):
Disallow: /emarket/addToCompare
Disallow: /emarket/basket
Disallow: /go_out.php
------------------------------------------
2. Будет ли корректным роботс вида
User-Agent: *
Disallow:
Sitemap: http://abc.ru/sitemap.xml
Host: abc.ru
3. Надо ли добавить строку
Crawl-delay: 10 (или может другое значение, скажем 3)
4. От чего спасает строка
Disallow: /admin
Заранее благодарю
1. Запрет на индексацию корзины (/emarket/basket), сравнения товаров (/emarket/addToCompare) и не знаю, что это (/go_out.php).
2. Разрешаете всем роботам индексировать весь сайт.
3. Решать вам. Подробнее тут -> http://help.yandex.ru/webmaster/?id=996567#1022359
4. Не индексирует админку.
Тут всё про роботс.тхт -> http://help.yandex.ru/webmaster/?id=996567
Не за что.
4. Не индексирует админку.
а что нежелательного в том, что проиндексируется админка?
иногда, злоумышленники пользуются уязвимостями известных CMS, что бы найти подходящую CMS ищут по определенному правилу, когда закрыта от индексации админка, её не найдут.
ну это мысли в слух, может быть для чего то другого?
иногда, злоумышленники пользуются уязвимостями известных CMS, что бы найти подходящую CMS ищут по определенному правилу, когда закрыта от индексации админка, её не найдут.
ну это мысли в слух, может быть для чего то другого?
Вот скорее ее найдут заглянув в роботс ;)
Вот скорее ее найдут заглянув в роботс ;)
для этого нужна база этих самых роботс.тхт? Где её взять?