melkov

Рейтинг
57
Регистрация
25.01.2001
Должность
postgraduate student (DMMC), yandex.ru programmer
Интересы
search engine(s), 3d engines

Инструкция по безопасности.

Если вы не хотите, чтобы половина страниц вашего любимого сайта "случайно" пропала с выдачи Яндекса, то:

1) Не размещайте на сайте каталоги, линкообменники и прочую ерунду. Если у вас все-таки есть каталог, лучше его разместить в отдельной директории или на поддомене, чтобы, в случае чего, забанился только каталог.

Если вы заметили, что у вас уже забанился каталог - не спешите переводить его в еще не забаненную директорию - может пропасть весь сайт.

2) Никогда не размещайте ссылок со своего сайта на дорвеи, фальшивые сайты, сайты-сателлиты и т.п. Даже одна такая ссылка может сильно повредить позициям сайта.

3) Никогда не размещайте на своем сайте java-script'ы, которые вызываются (<script src=...>) с других сайтов (за исключением надежно проверенных партнеров, известных счетчиков и рекламных сетей).

4) Не создавайте на своем сайте форум, гостевую книгу или блог, если вы не сможете его модерировать.

5) Если вы занимаетесь продажей ссылок, ограничивайте их количество (5-10 штук на весь сайт). Никогда не продавайте ссылки с каждой страницы сайта. Если ваш сайт новый - вообще не продавайте ссылки. См. также п.2

6) Не замусоривайте страницы сайта рекламой. Особенно если сайт новый и имеет посетителей только с поисковиков.

7) Закрывайте скрипты поиска по сайту и все технические разделы в robots.txt

За каждым пунктом - десятки относительно приличных сайтов, вебмастер которых хотел подработать или дешево раскрутиться.

решил зайти :)

1. Правила robots.txt:

Любая неизвестная директива просто игнорируется и никак не влияет на парсинг остальных директив в секции. И до, и после неизвестной директивы.

2. Яндекс-индексирующий робот:

Директива Host сейчас не используется. Хотя, вообще говоря (на случай, если вдруг будет использоваться), валидны все директивы Host.

3. Яндекс-робот-заркальщик:

Используется первая директива Host из встретившихся.

Полный серверный редирект (т.е. для внутренних страниц сайта должно быть: site1.ru/какаятостраница -> site2.ru/какаятостраница) как 6 лет назад приводил к подклейке site1.ru к site2.ru, так и сейчас приводит.

А если с только с морды редирект поставить, или с внутренних страниц хотя и редиректить, но не вышеописанным способом - то не склеится.

Вот и весь фокус.

aur, страница с приколами определенно не имеет отношения к бану Вашего сайта. Просто, видимо, Ваш форум как-то проспамили, а Вы недостаточно быстро спам стерли.

Все аномальные скачки тИЦ - ошибка. Скоро все вернется на свои законные места.

meland, не должен влиять. Читайте правила тИЦ

Это ж надо какой флуд, почти 700 сообщений 😮

Итак, что же было: был программный сбой, не связанный ни с какими улучшениями. Когда его заметили, было уже поздно - настало утро ;).

Что же стало: сегодня утром на поиске - то, что должно было быть еще вчера (ну за исключением 0.5% - диски потихоньку летят).

тИЦ пересчитывается раз в неделю. Иногда бывает так, что он не пересчитывается, последний такой случай был в июне.

Обычно свежий тИЦ публикуется в ночь с понедельника на вторник.

Бывают мелкие глюки при публикации подсчитанного тИЦ - каталог, "денежка" и Бар могут обновляться не синхронно, кеширование там всякое т.п.

Бывают и крупные глюки при публикации тИЦ в каталоге.

У сайтов, у которых недавно переклеилось главное зеркало, могут быть странные глюки со значением тИЦ, которые обычно исправляются со следующим пересчетом.

тИЦ пересчитывается для всех сайтов одновременно, т.е. не может быть так, что для одного пересчитался, а для другого - нет.

Глюки с зеркалами в Каталоге.

http://search.yaca.yandex.ru/yca/cy/ch/www.wwc.ru/

Если через 1-2 дня не устаканится - пишите в support.

AiK, с Гуглом меня беспокоит случай, когда есть и Disallow, и Host.

Что касается секции без Disallow, но с Host, хорошо, согласен, она неправильная :). Но, как я уже писал, никаких проблем от нее возникнуть не может.

Всего: 142