За 4 недели он вернется на мильйон - О ссылочных и поведенческих факторах

SEO палево №6 Страна зазеркалья

Игорь · 2009-10-17T08:35:24.0000000Z

SEO палево №6 Страна зазеркалья Цитата: «палил, палю и буду палить» Roman77 Страна зазеркалья. Пройдёмся по одной из серъёзных проблем поисковых систем: «зеркалам сайтов», данная функция лет 6 назад служила для, казалось бы хорошей цели, очистки поисковой базы от дубликатов. Много сайтов в Интернет имело (и имеет) дубликаты, например http://site.ru и http://www.site.ru/ . Естественно поисковые системы создали алгоритм для убирания из поиска дубликатов зеркала сайтов. Этот вопрос настолько серъёзен что был создан робот-зеркальщик, отдельный паук, отвечающий именно за поиск и определение дубликатов зеркал сайтов. Изначально этот процесс был полностью автоматическим, но из-за многочисленных нареканий было решено в файле robots.txt, который изначально в 1996 году был создан только для одной цели для инструктажа поисковых роботов какие страницы можно индексировать, а какие нельзя, добавить функционал ( robots.txt кстати и сейчас развивается и его уже называют не просто файлом в директории хост а уже и «стандарт robots.txt). Итак в стандарт robots.txt добавили новую директиву Host, которая позволяла вебмастеру вручную указывать пауку (почему программу-роботов называют пауками? наверное круто звучит прим. автора). И тут как говорил поручик Ржевский карта у меня так и попёрла. Вебмастера открыли в этой директиве уязвимость и не одну и не две. Итак по порядку. Уязвимость №1 «мочим конкурентов». В Интернете вовсю обсуждают как топить конкурентов, способов описываются миллионы, но действенных всего ничего. Это: а. Заражение сайта конкурента вирусом; б. Стук о том что конкурент использует поисковый спам в. «Приклеивание конкурента» Вот на третьем поподробнее: значительная часть сайтов в интернет не имеет в файле robots.txt директивы HOST, причём среди них сайты огромных компаний банков, крупных торговых компаний, государственных структур. Даже известнейший сайт студии Лебедева, рекламирующей в Интернете себя как пионера веба и команды вебмастеров съевшей тонны соли и тыщу собак, не имеет директивы HOST: http://www.artlebedev.ru/robots.txt Если у сайта нет в роботсе директивы HOST, то он становиться весьма уязвимым, конкуренты создают клона, прописывают в директиве у клона в роботсе следующее: Host: www.site-klon.ru И всё робот зеркальщик видит два одинаковых сайта, видит на одном из них директиву хост и клеит сайт без этой директивы к другому, что мы видим в результате? Полное выпадение пострадавшего из поиска, перетекание к клону всех обраток и в итоге посетителей. Причём пострадавшие узнают об этом только по факту, когда его приклеили к клону. Лечение одно срочное прописывание хоста у себя в директории и абузы хостерам и поисковым системам. Это помогает но не всегда, и бывает что вы возвращаетесь в поиск, но ниже чем до атаки клоноводов. Причём возвращение в индекс дело не одной недели, а порой нескольких месяцев. Правда обидно? Уязвимость №2 «прятки». В высоконкурентных тематиках мы всегда ощущаем дыхание конкурентов они смотрят где мы покупаем ссылки, стучат в поисковые системы и размещают ссылки там где мы нашли хорошую халяву. А почему бы нам не спрятать обратки? Итак создаём сайт копию нашего любимца, прописываем в хосте копии главный сайт и покупаем ссылки в различных сервисах (в той же сраной сапе например или на халявных ресурсах). Итог: в выдаче основной сайт растёт, тиц и пр увеличиваются а конкурент не понимает в чём дело, и пишет тупые топики в серче: «конкурент вырос в выдаче, Яша тупит и все козлы» Уязвимость №3, №4, №5 а оно мне надо? Лень писать. Вывод: я не учу как воровать чужие сайты и обманывать ПС, просто посмотрите у себя роботс и пропишите хост, пока не поздно. например вот это сайт: большой инет-магазин , выставляют счёта в он-лайне, а что если сделать клона, приклеить инет-магазин а потом подменить реквизиты в скрипте выставления счетов? Убытки будут сотни тысяч рублей.а все из-за незнания такой вещи как «страна зазеркалья», всем удачи

[Удален]

17 октября 2009, 15:22

#11

Roman77:
наоборот - ко мне обратились за помощью, что сайт пропал из выдачи...изучил клона, почесал репой...прописал хост у пострадавшего...написал обузу...через 4 недели потерпевший вернулся в выдачу.

всё что я пишу - из практики.

ну за 4 недели он мог и сам по себе вернутся

[Удален]

17 октября 2009, 20:59

#12

Roman77:
наоборот - ко мне обратились за помощью, что сайт пропал из выдачи...изучил клона, почесал репой...прописал хост у пострадавшего...написал обузу...через 4 недели потерпевший вернулся в выдачу.

Всё, Платону можно теперь больше не писать! Буду писать Роману :)

194

Prior

17 октября 2009, 21:10

#13

Продолжу ряд...

http://wikipedia.org/robots.txt

Директивы "host" нет :)

ТС, спалил тему на мильйон...теперь весь рунет рухнет :o

Ответы на вопрос - https://answers.net.pl

R7

264

Игорь

18 октября 2009, 07:06

#14

Prior:
Продолжу ряд...
http://wikipedia.org/robots.txt
Директивы "host" нет :)
ТС, спалил тему на мильйон...теперь весь рунет рухнет :o

директива host поддерживается не всеми ПС,

яшой, который лидер в рунете, данная директива поддерживается

194

Prior

18 октября 2009, 09:03

#15

Хорошо)

Тогда так http://ru.wikipedia.org/robots.txt ;)

272

Алексей Барыкин

18 октября 2009, 09:10

#16

Автора надо выпороть за растаманские укуренные бредни.

https://adminbook.ru/

D2

96

d12

19 октября 2009, 06:02

#17

Prior:
Хорошо)
Тогда так http://ru.wikipedia.org/robots.txt ;)

😂😂😂😂 пошел клеить http://ru.wikipedia.org/

P.S. Кто подскажет где серверов мощных прикупить? Виртуальный хостинг не выдержит столько трафа с ru.wikipedia.org 😂😂😂

В курилку однако надо тему переносить.

англоязычный сайт знакомств за 5 минут (http://www.owndating.ru/?id=500011787)

118

ravadir

19 октября 2009, 06:36

#18

Раз пошла такая пьянка....а с чего вы взяли, что у студии Лебедева нет robots.txt? ;)

Лей трафик на пуши выгодно! (https://daopush.com/ru/manage/main/register?refId=6613)

A

31

avriki

19 октября 2009, 07:11

#19

ravadir:
Раз пошла такая пьянка....а с чего вы взяли, что у студии Лебедева нет robots.txt? ;)

а этого никто не утверждал, написано лишь, что там нет директивы host

roman77 , такие смелые выводы делать можно, имея серьезную экспериментальную базу, а не на основе одного странного события, у которого наверняка были совсем иные причины

>> Контент за смешные деньги. Килосимвол 95% уника от $0,40 - ну не сказка ли? :) (http://advego.ru/0tn3fPkK3F) <<

Меры, принятые вручную: Агрессивный Упал доход Какой хостер не блокирует

4

kandyshop

19 октября 2009, 08:55

#20

да это не очень хороший путь. и это уже непалево а паленая тема...

Одобри (http://odobri.ru/): для блогов и форумов, cy10. От 10 голосов - на главную, до 4000 знаков; html-тэги, ссылки, картинки, "навсегда"; без: бирж, noindex, nofollow. Только ваши исходящие. Коммерц.-1wmz (перс.серт.)

Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы

Дзен реализовал для авторов возможность вывода денег через СПБ

SEO палево №6 Страна зазеркалья