- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Как запретить google индексировать содержимое сайта, желательно посредством robots.txt? Спасибо
User-agent: Googlebot
Disallow: /
ProuD88,
если на данный момент robots.txt:
"User-Agent: *
Disallow:
Host: site.ru"
То как добавить то, что Вы написали, при этом не запретив сайт к индексации остальным поисковикам и прочее?
То как добавить то, что Вы написали
так и добавить, прямо перед вашими данными... только уберите кавычки ", они лишние
да и почитать об этом можно, интернет еще не запретили...
Чтобы не создавать лишний топик, напишу сюда:
У меня запрещена директория
User-agent: *
Disallow: /folder/
но гугл в нее почему-то лезет и индексирует содержимое. Яндекс не индексирует.
Где ошибка?
Спасибо
jare, ошибок нет, просто гугл не совсем обращает внимание на указания в роботс-е
на новом сайте гугл проиндексировал wp-admin, хотя он закрыт роботсом. наглый гугля
Большой брат всё видит!