Нужна помощь по индексации

N
На сайте с 14.06.2004
Offline
107
730

Значит я сделал сайт и не знаю как его подготовить для индексации поисковиками. Читал про robots.txt и теги <meta> Вобщем имеется несколько вопросов на которые я не нашел ответа:

1. Если я подготовлю сайт под яндекс, то нормально ли проиндексирует сайт рабмлер гугл и т.д.?(Тоесть не могут ли занести в черный список).

2. Сайт полностью на пхп(чистого html нет вообще)+сайт на 3 языках. Как правильно подготовить для индексации? (Как хранить ключевые слова - генерировать их под каждую страницу? Например скрипт новостей можно сделать слова статичными(новости, спорт, политика и т.д.) а можно под каждую новость писать свои ключевые слова(создать отдельное поле в таблице новостей)

И еще ключевые слова можно писать на разных языках? Тоесть допустим "спорт новости sport news...

3. Если у меня есть robots.txt нужно ли в тегах мета прописывать теги роботс или можна обойтись?

4. Если я не хочу индексировать сайт пока(еще нужно кое-что доделать) а я его уже выложил в сети под тем доменом под которым он будет "жить" то не найдет ли его робот автоматически и не проиндексирует в таком случае? Что делать тогда?

Спасибо

Lupus
На сайте с 02.11.2002
Offline
241
#1

1. В основном критерии спама (для "черного списка") у поисковиков похожи: не клоачить, не спамить и будет счастье :)

2. IMHO, чем разнообразнее страницы, тем больше эффект от поисковиков.

Полагаю, стоит избегать одинаковых тайтлов и дескрипшнов.

3. Имеют значения меты "robots", только запрещающие что-то (да и то не всегда).

то не найдет ли его робот автоматически и не проиндексирует в таком случае?
Очень вероятно, то найдет. Есть много неочевидных путей.

Лучше временно в robots.txt вставить:

User-agent: *
Disallow: /

Или, для надежности, вставить в .htaccess:

RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} !mozilla [nocase]
RewriteRule ^.*$ - [F]

Все вышенаписанное (кроме последнего пункта) - IMHO. :)

There are two types of people in this world: 1. Those who can extrapolate from incomplete data.
N
На сайте с 14.06.2004
Offline
107
#2

Поисковый робот пройдется по моей базе данных и будет индексировать содержимое?

Вот в чем прикол:

например есть в новсти фотография. В таблице хранится имя файла и описание под рисунок ALT.

При выдаче результата пользователю я пишу:

<img src="<? echo $img_name; ?>" alt="<? echo $ALT; ?>">

Также название новости хранится просто текстом а пользователю выфдаю:

<h3 class="news"><? echo $new_name; ?></h3>

Правильно ли это? Или нужно все хранить в базе стегами???????

SandyMan
На сайте с 13.06.2004
Offline
129
#3

робот индексирует не базу данных, а страницу которая получает что-то из базы данных.

насчет хранения тегов, то если можно обоитись, то лучше не сохранять. вдруг вы захотите изменить на тег типа <h2 class=news2>...

придется UPDATE запускать в базе. а так, только заменить одну строчку в коде

D
На сайте с 23.11.2003
Offline
167
dmt
#4
1. Если я подготовлю сайт под яндекс, то нормально ли проиндексирует сайт рабмлер гугл и т.д.?(Тоесть не могут ли занести в черный список).

Если будет за что банить - забанят. Тут нет роли проиндексировал под кого ты его "готовил".

2. Сайт полностью на пхп(чистого html нет вообще)+сайт на 3 языках. Как правильно подготовить для индексации? (Как хранить ключевые слова - генерировать их под каждую страницу? Например скрипт новостей можно сделать слова статичными(новости, спорт, политика и т.д.) а можно под каждую новость писать свои ключевые слова(создать отдельное поле в таблице новостей)
И еще ключевые слова можно писать на разных языках? Тоесть допустим "спорт новости sport news...

ИМХО, ключевые слова уже не играют ни какой роли. Мне кажется, что тег <meta> помер окончательно.

3. Если у меня есть robots.txt нужно ли в тегах мета прописывать теги роботс или можна обойтись?

Смотря какую цель ты приследуешь... Ты хочешь запретить индексацию отдельных страниц? Или хочешь указать, что индексировать можно все? Если можно индексировать, что можешь не писать ни роботс.тикст, ни мета тегов.

4. Если я не хочу индексировать сайт пока(еще нужно кое-что доделать) а я его уже выложил в сети под тем доменом под которым он будет "жить" то не найдет ли его робот автоматически и не проиндексирует в таком случае? Что делать тогда?

Может найти, если в инете на сайт будет стоять ссылка, или, допустим, на сайт зайдет пользователь, у которого стоит яндекс.бар, то может быть и проиндексирован. Запрети индексацию всего сайта в роботс.тикст и все.

D
На сайте с 23.11.2003
Offline
167
dmt
#5
Правильно ли это? Или нужно все хранить в базе стегами???????

Разберись где у тебя сервер, а где клиент!

В этом форуме уже писалось, что клиенту, тобишь браузеру отдается (в твоем случае) чистый html, со всякими css и джава скриптами. И клиент не знает, как на сервере эта информация собиралась и из какой базы она бралась.

maximusr
На сайте с 24.10.2003
Offline
44
#6
Как писал dmt
Мне кажется, что тег <meta> помер окончательно.

не сказал бы я что он ОКОНЧАТЕЛЬНО умер

TriLan - комплексный интернет-маркетинг (http://www.trilan.ru)
D
На сайте с 23.11.2003
Offline
167
dmt
#7
не сказал бы я что он ОКОНЧАТЕЛЬНО умер

Аргументируй! Какой из них еще не умер?

maximusr
На сайте с 24.10.2003
Offline
44
#8

description например до конца не умер, пусть он должного влияния не оказывает, но в качестве описалова может выводиться

T
На сайте с 16.02.2004
Offline
25
#9
Как писал maximusr
description например до конца не умер, пусть он должного влияния не оказывает, но в качестве описалова может выводиться

Давно такого не наблюдал. 🚬

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий