Млина, служба поддержки всегда в асе вне сети. Кинул ксапов для покупки доменов на iDomen.ru отправил мыло и молчек. Что дальше то делать? Когда поддержка в асе бывает то?
Пару моих бизнес порталов постоянно атакуют ссылками с помоек из рубрик про кошечек и собачек. также на них ставят ссылки с доров про знакомства и секс - пофиг, нафиг - абсолютно ничего не меняется в яндексе для порталов. Но бэки растут :) Смотрю и радуюсь (на один даже больше чем моих стоит левака) жаль что пользы от этих циферек нету, но вреда однако тоже никакого.
Нет конечно :)
Там помню точно именно упоминался вскользь именно rel, надпись в абзаце примерно была такая (при расчете Тиц тря ля ля ссылки на ваш сайт. Робот находит ссылки на вашей странице на другой сайт и ставит их в очередь для обхода, тра ля ля. Если вы не желаете, чтобы робот шел по ссылке с вашей страницы, то можете указать для нее rel="NOFOLLOW" и робот тра ля ля.)
Там именно не в тему было просто вскользь упомянуто про это одним предложением в описании ТИц и его влиянии. Причем, я помню до этого текста всегда было трудно добраться и на него выход был какими то обходными путями, а все кто хотел почитать про ТИц попадали на другой текст в факе, а этот был помоему гдето, когда про денежку читаешь на своем сайте и пытаешся ее код получить (сейчас точно не помню где).
У меня очень часто яша считывает роботса. Скорее всего, что не в каждом визите это потому, что - он зайдет, считает роботса, потом наберет в буфер ссылок для обхода, пройдет из них не много и уходит а потом опять из уже набранных проходит и уходит и так пока буфер не кончится, а потом опять сначала - роботс и т.д.
Точно был. Там еще про ТИц описывалось вторым проходом, и более детально, помимио основной темы о ТИц в факе. Там же и этот тэг был упомянут.
Вообще то отсев на стадии добавления - ресурсоемкая процедура.
В данный момент, Яндекс скорее всего отсеивает неуник отдельным процессом, который поаномерно в порядке сформированной очереди для сайтов, лопатит их датацентры сравнивая контент, время и кучу прочих параметров, а потом уже накладывает фильтры. При этом индексный алгоритм может находиться совсем на других серверах нежели проверяющий уникальность и работать сам по себе, а проверяющий сам по себе. За время, пока проверялка дойдет до добавленного и проиндексенного сайта, может пройти и не неделя и даже не месяц.
To Елистратов:
Вы конечно уважаемый человек, но тут вы не правы. На счет редиректа - именно не удалена а перемещена. На счет не передается - я пишу не предположение а проверенный мною факт. Эта фишка пошла, когда народ наловчился делать гуглу козью морду (ставить 301 на своей страницы и редирект на морду с пр5-6, далее не буду распростроняться что делать, но спецы меня поймут и многие знают эту феню), вот тогда же у всех родилась идея проверить: а как яндекс на такое реагирует. Я тоже замерил - оказалось не так, он именно сразу выбрасывает страницы на которых стоит 301 и ссылку считает уже на конечную страницу куда произошел редирект. Но при этом тянет не полный ее вес, а процентов 75-80 (скорее это из за того что конечная страница моложе старой, из за этого и потери).
To ALL:
На счет вложенности каталогов - боже упаси, в весе разницы нет, но вот (тоже проверено и не однократно) заходы индексатора, и скорость скушивания других ссылок с таких страниц глобально ниже чем со вторым уровнем вложенности.
Оформление ссылок если они видимые для пользователя - это уже вкус хозяина сайта. Если вы прикололись над ползователем, и решили ему поставить задачку - найди ка 10 ссылок на моей странице, то это только ваши личные отношения с пользователем, а яндекс это не волнует, главное что они видимы.
Не все, есть прямые. Тут дело в потере денежек, в банеробменках намного меньше возможностей для массовой раскрутки, и денежек соответственно меньше из за этого капает, поэтому можно смело пока прикрывать глаза на их существование, но это только пока. ИМХО.
Видимо у вашего хостера проблеммы при обращении к такому типу урлов как www.site.ru/robots.txt и сервак обубевает и срывается в 500-ую ошибку. Не мучайтесь, добавьте robots.txt в котром просто разрешите всем ботам все индексить и попробуйте снова.