Запрет индексации

powerkisa
На сайте с 01.05.2010
Offline
118
530

Здравствуйте, запускаем магазин.

Заполняем метатеги постепенно и хотим показать пользователям максимум товара, а ботам Гугла только заполненные страницы с метатегами.

Стоит ли и как лучше закрывать страницы для бота:

1) роботс

2) ответ сервера x-robots-tag noindex

3) другое

The WishMaster
На сайте с 29.09.2005
Offline
2543
#1

Что мешает вначале все заполнить, а потом запустить?

Пешу текста дешыго! Тематики - туризм, СЕО, творчество, кулинария, шизотерика :)
powerkisa
На сайте с 01.05.2010
Offline
118
#2

800к страниц и ко всем нужно писать шаблоны мета тегов по семантике

The WishMaster
На сайте с 29.09.2005
Offline
2543
#3
powerkisa:
800к страниц и ко всем нужно писать шаблоны мета тегов по семантике

Автоматизировать нельзя?

powerkisa
На сайте с 01.05.2010
Offline
118
#4

автоматизировали, но пока слова с СЯ прописатьв мета то время забирает и еще +- 1800 категорий

H
На сайте с 01.04.2014
Offline
571
Had
#5
powerkisa:
1) роботс

Через него лучше, надёжней будет.

The WishMaster
На сайте с 29.09.2005
Offline
2543
#6
Had:
Через него лучше, надёжней будет.

Не факт. Роботс - не более чем рекомендации роботу.

K0
На сайте с 16.05.2012
Offline
92
#7

robots.txt подсказывает боту куда нельзя ходить, а куда можно.

x-robots-tag noindex говорит боту что нельзя брать в индекс.

Выбирайте что вам нужно.

powerkisa
На сайте с 01.05.2010
Offline
118
#8

Всем привет сделали x robots "none"

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий