El_Gato

Рейтинг
110
Регистрация
25.02.2008
Aveter:
El_Gato, Hkey, спасибо за пояснения.
1. Из всего выше сказанного, я делаю вывод, что мне достаточно в роботс.тхт написать:

Allow: /index.php, а все осатльное в public_html можно смело запрещать. Зайдя по www.mysite.ru/index.php робот увидит главную страницу, с которой ссылки через меню сайта ведут на все категории, подкатегории и страницы со статьями и проиндексируют все, что надо. Верно?

2. Allow: /index.php* - я думаю писать бессмысленно, т.к. все равно у меня нет динамических страниц типа mysite.ru/index.php?param1=dsfds&param2=3, а они подменяются статическими вида http://www.mysite.ru/word/n1/n2/n3/, верно?

3. Можно в принципе еще написать Allow: /word/, где word это все динамические папки, где находятся страницы со статьями (т.е. page, cat, articles, info), чтобы робот точно знал где стоит искать статьи для индексации. Улучшит ли это индексацию, или Allow: /index.php вполне достаточно?

Спасибо.

Все верно, только пунк 3 не опционально, а обязательно...

Ведь если робот найдет сслыку вида http://www.mysite.ru/word/n1/n2/n3/, но будет запрещен доступ в папку /word/ со всеми ее подпапками, тогда робот и не пойдет дальше главной.

А вообще лучше не мудрить с Allow, а просто ручками прописать Disallow для всех файлов и папок кроме index.php, /word/ и /, т.е. не напишите чего доброго что то вроде:

Disallow: /*

или

Disallow: *

yurecbig:
А для PR внутренней страницы например Портфолио, влияют ли ссылки с главной страницы?

С любой страницы. Притом если у страницы донора PR (в ссылках, а не в условных еденицах) допустим 1000, то каждой странице, на которую она ссылается она передаст часть веса от 870 ссылок. т.е. если на странице 10 ссылок, каждая из них должна получить примерно по 87...

Вот статья про PR, может заинтересует http://www.digits.ru/articles/promotion/pagerank.html

Aveter:
Понятно, спасибо. Только есть один нюанс - все эти папки типа word (т.е. page, cat, articles, info) физически не существуют в public_html. Видимо они создаются (где - не знаю, но врядли в public_html) временно во время выборки (т.е. клика на какой-либо пункт из основного меню сайта) и затем уничтожаются. В связи с этим вопрос - нет ли тут каких-то нюансов и будет ли команда типа Allow: /word/ работать?

Понятное дело, что не существуют... Это просто в файлике .htaccess прописанны павила, по которым урлы вида, с которыми реально работает CMS:

Aveter:
site.ru/index.php?param1=dsfds&param2=3

подменяются урлами вида:

El_Gato:
http://www.mysite.ru/word/n1/n2/n3/

но все это происходит прозрачно для пользователей и поисковиков. Поисковики, как и пользователи не лазят по папкам на вашем сервере, а просто дают запрос серверу, мол дай мне документ с таким урлом, сервер решает в зависимости от урла, что ответить и отдыет резальтат клиенту (человеку или ПС). Только ПС, когда находят какой-либо урл на ваш сайт, сначала по маске сравнивают его с правилами в robots.txt и если правилами индексация его не запрецена, то посылают запрос серверу, дай мол мне этот документ.

viktor-1:
Поэтому если продлится долгое время, больше двух месяцев, то меняйте домен.
__________________
регистрация доменов ru по 100р. - PWX.ru

Какой маркетинговый ход... Все проблемы решит новый домен от PWX.ru :)

Aveter, если бы линки были динамические, т.е. вида site.ru/index.php?param1=dsfds&param2=3, тогда Allow: /index.php* вполне хватило бы...

Aveter:
http://www.mysite.ru/word/n1/n2/n3/

т.е. у вас прописанно подменятьь ддинамические урлы статическими... Для такой схемы достаточно прописать что-то вида: Allow: /word/

Только и в том и другом случае, если нужна индексация картинок и т.п. нужно посмотреть по какому адресу их CMS прописала и тот каталог тоже разрешить...

Aveter, у вас все линки на страницы идут типа

site.ru/index.php?param1=dsfds&param2=3

т.е. по сути идет обращение только к одной странице, на которой контент уже генерится автоматически, в зависимости от переданных параметров... А как и откуда контент появляется на вашей странице ПС откровенно говоря не должно... Так что разрешена должна быть эта страница, а остальное уже хозяин - барин...

hippis, Делайте сайты хоть немного интерестными для людей и не перелинковывайте их и проблем быть не должно...

Роман Олегович:
Понятно, из-за серого сайта могут и белые покосить, если айпишник общий.
Я так понимаю общий айпишник у сайтов, если они на одном хостинге (на одном аккаунте) размещены.

Хостинг один, а аккаунты могут быть и совершенно разные... Поэтому я бы сказал наоборот, если сайт белый и пушистый, то лучше выделенный, чтобы не расплачиваться за чужие грехи...

Можно сохраняя классическую структуру сайта просто при входе пользователя на главную проверять, установлены ли у него куки, и если не установлены или истекли, устанавливать ему новые куки и редиректить его на входную страницу. И входную страницу получите и никаких особенностей продвижения...

Рогаль Иван:
Ответ бы получили короткий и ясный, то что мы делаем это запрещено или разрешено. Да, яндекс ведёт борьбу. Но получается из-за этого страдают те, которые пытаются продвигать сайты по их законам, т.е. те законы которые приводит яша. Вообщем я так и не понял нарушаем мы закон или нет из-за того что мы начинаем набирать ссылочную массу на свой сайт.

Законов мы никаких не нарушаем, а нарушаем правила, которые устанавливают ПС, мол не мешайте нам, мы разберемся сами, а не желаете, тогда мы вас «искать» не будем. Вот и все…

Получается, что остается только моральная сторона дела, поэтому у разговор такой жаркий. Да было бы хорошо, если бы контент определял все, ПС не трогали бы наши ссылки и в интернете царили бы покой и порядок. Но реалии таковы, что уязвимость существующего алгоритма ссылочного ранжирования заспамливанью, заставляет и более или менее порядочных оптимизаторов использовать играть по серым правилам.

С одной стороны грустно, что рулит спам, а не контент, с другой – это ведь наш хлеб (ради бога, а не пропагандирую спам, но грубо говоря увеличение ссылочного – тоже спам). Вот и получается, что нас настоятельно попросили, а решать в конечном счете нам, что нам дороже, чистая совесть или позиции в топе.

Всего: 196