moonters

moonters
Рейтинг
139
Регистрация
09.10.2008

1. ответ на этот вопрос собственно найти не сложно

смотрим свой файл лога и видим:

95.108.142.150 - - [20/Nov/2009:02:11:19 +0200] "GET /robots.txt HTTP/1.0" 200 449 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [20/Nov/2009:02:11:20 +0200] "GET /robots.txt HTTP/1.0" 200 449 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [20/Nov/2009:02:11:21 +0200] "GET / HTTP/1.0" 200 7654 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [20/Nov/2009:02:11:22 +0200] "GET / HTTP/1.0" 200 7654 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [20/Nov/2009:02:11:23 +0200] "GET / HTTP/1.0" 200 7654 "-" "Yandex/1.01.001 (compatible; Win16; H)"
95.108.142.150 - - [20/Nov/2009:02:11:24 +0200] "GET / HTTP/1.0" 200 7654 "-" "Yandex/1.01.001 (compatible; Win16; H)"

66.249.68.245 - - [20/Nov/2009:08:21:32 +0200] "GET /robots.txt HTTP/1.0" 200 421 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.68.245 - - [20/Nov/2009:08:21:32 +0200] "GET /index.html HTTP/1.0" 301 502 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.68.164 - - [20/Nov/2009:08:21:33 +0200] "GET / HTTP/1.0" 200 7654 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

Сначала робот запрашивает файл robots.txt.

Причём если опять возвращается через некоторое время (допустим 15 минут), то опять запрашивает этот файл.

2. Ответ тоже понятен. Ввиду того, что главная страница - это более посещаемая страница нашего сайта (можно поспорить, но индексация в основном начинается с неё), то мы размещаем ссылку на карту на главной странице, чем помогаем роботу быстрее проиндексировать наш сайт.

Если Вы это прочитали на страничке советов а-ля "Как подготовить сайт для Сапы", то тоже ясно - сделать все страницы доступными в два клика от главной.

Это относится к карте в формате .html.

Насчёт .xml - точно не скажу, Её достаточно прописать её в robots.txt и указать в панели веб-мастера (Яндекс, Google). На всякий случай я делаю ссылку на sitemap.xml рядом со ссылкой на sitemap.html, но в панели Я.Вебмастер я вижу, что Яндекс отмечает эту страницу, как страницу не подлежащую индексации ("Формат документа не поддерживается"). Во всяком случае мне это не мешает ...

Может кто-нибудь знает более точный ответ?

2б. сайт на движке или самопис?

В движках есть плагины для составления sitemap.xml.

можно писать ручками.

можно использовать софт (SiteMapG, GSiteCrawler, Xenu), онлайн-сервисы (xml-sitemaps.com). И софта и сервисов сечас вагон и маленькая тележка. У гугла есть бесплатный sitemap-gen - но он вроде на Перле написан.

moonters добавил 21.11.2009 в 14:04

3. гугл изменил алгоритм расчета PR.

Вес по ссылке не передастся, но и Вашим страницам он тоже не перейдет.

1-ссылка

2-ссылка

3-ссылка в nofollow

до изменения алгоритма:

1 и 2 ссылка получает по 50% веса

3 ссылка - 0

после изменения алгоритма:

1 и 2 ссылка получает по 33% веса

3 ссылка - 0

4. влияет. поможет в поиске по картинкам.

5. лучше так

User-Agent: *
{всякие запрещенные разделы }
Disallow: /url/
Disallow: /concepts/new/
Disallow: /admin/
Disallow: /forum/misc/banners/
Sitemap: http://site.com/sitemap.xml

User-Agent: Yandex
{всякие запрещенные разделы }
Disallow: /url/
Disallow: /concepts/new/
Disallow: /admin/
Disallow: /forum/misc/banners/
Sitemap: http://site.com/sitemap.xml
Host: site.com

host - директива яндекса, другие ПС её не понимают.

разрежьте её на две части, одну выровняйте влево, вторую вправо.

всё это на синем фоне, таком как на картинке.

Неужели непонятно что имелось ввиду?

Мне понятно все.

А вот Вам как видно нет.

там шапка та же, ее реальная ширина 1500 пикселей и при разрешении 1024 на 768 эта шапка влазиет вся

Там шапка не та же.

ligatruda.ru/wps - тут она одним файлом header.jpg и имеет размеры 1222х183 (люблю сам себя цитировать).

а тут ligatruda.ru - top_bg01.gif размером 1500х152 и картинки справа вставлены отдельно, и во втором случае она тоже вылазит, но это не видно.

для особо одарённых

шапка с ligatruda.ru/wps

шапка с ligatruda.ru

Сейчас понятно? Странно, что Вам надо объяснять структуру Ваших сайтов.

Извините за испорченный дизайн форума, но тут по другому никак

Надо смотреть настройки постраничной навигации в админке.

Если хотите гляну, киньте в личку пароль к админке, потом смените ...

у сайта шапка при этом разрешении просто растягиевается

она у Вас не растягивается

Эта картинка (header.jpg) имеет размеры 1222х183.

И как Вы её по другому хотите видеть при разрешении 1024х768?

ясный пень, что вся не поместится.

Вообще-то вопрос не в этот раздел, а в /ru/forum/development/web

Kost:
После непродления редирект перестанет работать и сайты расклеются.

В данном случае мы лелеем надежду, что уже новый будет в индексе.

Kost:
Старая ссылочная база потеряется навсегда, вот и все.

Это понятно, но нет возможности сохранить ссылочную базу, не оставляя старый домен, как того хочет ТС.

Кроме этого конечно

уговаривать владельцев ссылающихся сайтов исправить ссылки

а может там каталожные ссылки😂

dino_spomoni:

Старый домен придется продлять вместе с новым.
Не подходит такой вариант.

Его продлять надо будет до того времени пока в индексе ПС страницы старого сайта не заменятся страницами нового, это максимум один раз, а вдруг успеете до date expire грядущей, то вообще не надо продлять.

Если Вы хотите type-in траффик сохранить, то нифига без продления двух доменов у Вас не получится.

dino_spomoni:
у меня ситуация конкретная, с .ru на .com,

На техническую сторону вопроса это ни коим образом не влияет

лучше относится к зоне .ru, чем .com

И каким образом можно будет на это повлиять, если тебе нужна именно зона .com

ЗЫ. /ru/forum/comment/1622259 №36

valenti:
Дайте понятный ответ, без шуток, пожалуйста. А то мне не до шуток уже тут, совсем запуталась.

Может это http://devaka.ru/articles/two-links-experiment поможет Вам разобраться.

Всего: 463