Запрет индексации

powerkisa
На сайте с 01.05.2010
Offline
118
528

Здравствуйте, запускаем магазин.

Заполняем метатеги постепенно и хотим показать пользователям максимум товара, а ботам Гугла только заполненные страницы с метатегами.

Стоит ли и как лучше закрывать страницы для бота:

1) роботс

2) ответ сервера x-robots-tag noindex

3) другое

The WishMaster
На сайте с 29.09.2005
Offline
2526
#1

Что мешает вначале все заполнить, а потом запустить?

ПИШУ ТЕКСТЫ ДЛЯ ЛЮДЕЙ НЕДОРОГО. Тематики - туризм, СЕО, творчество, кулинария, шизотерика :) Лучший хостер и регистратор. Проверено. ( http://ukrnames.com/?ref_id=3599 )
powerkisa
На сайте с 01.05.2010
Offline
118
#2

800к страниц и ко всем нужно писать шаблоны мета тегов по семантике

The WishMaster
На сайте с 29.09.2005
Offline
2526
#3
powerkisa:
800к страниц и ко всем нужно писать шаблоны мета тегов по семантике

Автоматизировать нельзя?

powerkisa
На сайте с 01.05.2010
Offline
118
#4

автоматизировали, но пока слова с СЯ прописатьв мета то время забирает и еще +- 1800 категорий

Had
На сайте с 01.04.2014
Offline
542
Had
#5
powerkisa:
1) роботс

Через него лучше, надёжней будет.

⭐ Самый лучший и надёжный хостинг - https://clck.ru/MDrmD Не экономьте на хостинге, скупой платит дважды. ⭐
The WishMaster
На сайте с 29.09.2005
Offline
2526
#6
Had:
Через него лучше, надёжней будет.

Не факт. Роботс - не более чем рекомендации роботу.

K0
На сайте с 16.05.2012
Offline
85
#7

robots.txt подсказывает боту куда нельзя ходить, а куда можно.

x-robots-tag noindex говорит боту что нельзя брать в индекс.

Выбирайте что вам нужно.

powerkisa
На сайте с 01.05.2010
Offline
118
#8

Всем привет сделали x robots "none"

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий