Сайт никак не проиндексируется в яндексе

12
XeNum
На сайте с 08.02.2006
Offline
54
6742

сайт: https://rentmix.ru

robots: https://rentmix.ru/robots.txt

запущен и добавлен в поисковые системы: 13 марта

В Google уже проиндексировано почти 50 000 страниц:

https://www.google.ru/search?ie=UTF-8&hl=ru&q=site%3Arentmix.ru

В Яндексе - 0

http://yandex.ru/yandsearch?text=site%3Arentmix.ru&from=os&lr=213

В Webmaster пишет, что

Сайт начал индексироваться. Страницы должны появиться в поиске через 1-2 обновления поисковой базы. В поиске могут присутствовать страницы проиндексированные быстрым роботом.

Но такое сообщение висит уже недели 4, почти сразу после запуска.

В поддержке пишут:

Спасибо, что обратили наше внимание на проблемы с индексированием Вашего сайта. Мы постараемся выяснить, по какой причине он не начинает обходиться роботом, и сделаем всё возможное, чтобы устранить её.

Но тут уже 3 недели ничего к лучшему не изменилось.

Подскажите, в чем может быть проблема? Или надо дальше в саппорт писать?

beginerx
На сайте с 13.07.2009
Offline
173
#1

Дело втом что это ГС, в основном индексе гугла 81 стр, а всего гугл нашел 46 тысяч!!! Такие соотношения характерны для хорошо сделанных и еще не забаненных доров.

Вывод Яндекс сделал правильно, сайт есть псевдо дор или просто дор с генеренными страницами с малоценным контентом (хотя шаблон на 3+ или даже 4). Бан закономерен.

Имхо закрыть все от индексации, кроме тех 81 стр. что гугл посчитал достаточно представительными для людей затем и слезно просить яндекс (Платона) разбанить ваш дор. :)

(да, да, я считаю, что гугл довольно точно определяет ценные страницы и генеренные псевдо дорные страницы, яндекс же банит все нафиг сразу, вкупе и с хорошими стр.
ибо нефиг! :))

>>>Скорость и Реакция<<< (https://vk.com/app4629907 ): онлайн тренировка скорости и времени реакции.... (https://vk.com/app4612117 )... (https://vk.com/club18740762 ).
XeNum
На сайте с 08.02.2006
Offline
54
#2
beginerx:
Дело втом что это ГС, в основном индексе гугла 81 стр, а всего гугл нашел 46 тысяч!!! Такие соотношения характерны для хорошо сделанных и еще не забаненных доров.

Вывод Яндекс сделал правильно, сайт есть псевдо дор или просто дор с генеренными страницами с малоценным контентом. Бан закономерен.

Имхо закрыть все кроме тех 81 стр. что гугл посчитал достаточно представительными
для людей от индексации и слезно просить яндекс разбанить ваш дор. :)

Не знаю уж по каким признакам Вы оценили наш сайт как ГС и дор. Если такие есть - озвучьте, мы постараемся исправить. Реально сайт сделан прежде для всего для людей и является не большим дором, чем booking.com, при том, что контент в рунете у нас уникальный. Кроме того крутится контекстная реклама и в Яндекс, и в Google на немаленькие суммы + установлены системы аналитики, которые показывают, что люди с сайта не уходят. Так что я решительно не понимаю по каким признакам сайт можно оценить как дор.

beginerx
На сайте с 13.07.2009
Offline
173
#3

критерии придумываю не я а гугл и яндекс... но в данном случае я с ними согласен, на мой взгляд все страницы одинаковые и выглядят как доры на едином шаблоне.

И да, некоторых гигантских доров по каким-то причинам не банят...

о причинах почему не знаю, но самопальные аналоги-клоны банятся в считанные часы, сам проверял :)

И вам еще подсказка, на мой лично взгляд будь я яндексом то банил бы сайты
с гигантским кол-вом страниц обвещанным директом и адсенсом, не за саму рекламу,
а за совокупность - огромное число страниц + много ТЕМАТИЧЕСКОЙ рекламы,
эта совокупность указывает что сайт сделан для заработка на рекламе путем
перенаправления людей на реальные сайты оказывающие услуги, то есть фактически
это хитрый дор. В тоже время будь на сайте НЕ тематическая реклама я бы не забанил!
Понимаете ход моих мыслей? :)

но вообще это наверное слишком сложные "ходы"... так что...

XeNum
На сайте с 08.02.2006
Offline
54
#4

Да, мысли конечно интересные. Никогда бы не подумали, что мы сделали дор. Да и вообще я не представляю себе как можно сделать такой сервис, чтобы он не был похож на дор (пример - тот же booking.com).

Но даже если и предположить, что с точки зрения яндекса наш сайт является дором, то другие признаки говорят ему же, что это не дор:

- посетители просматривают гораздо больше одной страницы и проводят на сайте много времени (что подтверждено яндекс.метрикой)

- на сайте вообще нет рекламы

- в директе крутится куча нашей рекламы, т.е. не яндекс платит нам, а мы ему

- внешних ссылок на сайте наберется разве что с 10, т.е. народ никуда с сайта не направляем

В общем как поисковики и просят делали сайт для людей.

O
На сайте с 23.11.2011
Offline
95
#5

что у вас в акцессе прописано? касаемо редиректа с http на https и запрета на индексацию дублей?

XeNum
На сайте с 08.02.2006
Offline
54
#6
Ogneyar:
что у вас в акцессе прописано? касаемо редиректа с http на https и запрета на индексацию дублей?

.htaccess не используем, редиректим на уровне приложения. Редирект 301 стоит.

wget --no-check-certificate http://rentmix.ru
--2013-04-21 23:07:35-- http://rentmix.ru/
Resolving rentmix.ru... 144.76.26.210
Connecting to rentmix.ru|144.76.26.210|:80... connected.
HTTP request sent, awaiting response... 301 Moved Permanently
Location: https://rentmix.ru/ [following]
--2013-04-21 23:07:36-- https://rentmix.ru/
Connecting to rentmix.ru|144.76.26.210|:443... connected.
WARNING: cannot verify rentmix.ru's certificate, issued by `/C=IL/O=StartCom Ltd./OU=Secure Digital Certificate Signing/CN=StartCom Class 2 Primary Intermediate Server CA':
Self-signed certificate encountered.
WARNING: certificate common name `www.rentmix.ru' doesn't match requested host name `rentmix.ru'.
HTTP request sent, awaiting response... 200 OK
Length: 50469 (49K) [text/html]
Saving to: `index.html'

100%[====================================================================================================================>] 50,469 --.-K/s in 0.06s

2013-04-21 23:07:36 (764 KB/s) - `index.html' saved [50469/50469]

На алиасах индексация для Google вообще закрыта. Для яндекс прописана директива host:

https://rentmixer.ru/robots.txt

O
На сайте с 23.11.2011
Offline
95
#7
User-agent: *
Disallow: /
User-agent: Yandex

Здесь у вас секции не разделены.

На rentmix.ru секции под яндекс вообще нет. Поправьте роботс.

И еще я бы на вашем месте уточнил у Платонов вот этот вопрос: http://platon.ya.ru/replies.xml?item_no=2073

В частности, фразу:

Типичные ошибки, из-за которых не происходит правильная склейка/переклейка:

Неправильно прописана директива Host:
Host: http://www.yandex.ru (протокол http:// указывать не нужно, в отличии от https://)

Плюс вот это:

просто в случае установки 301 редиректа на неглавное зеркало есть опасность, что сайт может пропасть из выдачи на некоторое время, поэтому редирект надо устанавливать очень аккуратно

У вас, возможно, что-то подобное и произошло - новый сайт еще не начал индексироваться, как был переклеен. Пока прошла склейка, ап зеркал вроде только недавно был, а теперь еще ждите индексацию.

В следующий раз сначала все-таки дождитесь индекса, а потом уже редиректы и зеркала ставьте.

XeNum
На сайте с 08.02.2006
Offline
54
#8

Ogneyar, спасибо. Очень похоже на наш случай. Во всяком случае ошибки увидел и их надо править.

Здесь у вас секции не разделены.

Можете уточнить, как разделить секции? Просто пустую строку между ними добавить? Яндекс не ругается, что файл некорректен.

На rentmix.ru секции под яндекс вообще нет. Поправьте роботс.

Там просто один robots для всех поисковиков. Судя по проверке яндекс видит все нужные записи из файла.

O
На сайте с 23.11.2011
Offline
95
#9

XeNum, да, добавить пустую строку.

http://help.yandex.ru/webmaster/?id=996567 - вот тут мануал самого яндекса по роботсу.

Для него все же рекомендуется отдельную секцию создавать, т.к., к примеру,

Некоторые роботы Яндекса скачивают документы не для их последующей индексации, а для других специфичных целей. Для избежания непреднамеренной блокировки владельцами сайтов они могут не следовать ограничивающим директивам в robots.txt, предназначенным для произвольных роботов (User-agent: *)

Да и хост логичнее там прописать будет.

Но основное все же - это уточните насчет зеркал, как проклеилось, правильно ли выполнен редирект и записан хост основного зеркала. Если все нормально, то сайт проиндексируется. Плюс, попробуйте купить ссылок с новостников, или тот же твиттер, чтобы быстробота заманить.

Ибо не верится мне, что у вас с самого начала бан висит. А у АГСов хотя бы одна страница в индексе но полюбому должна быть =)

F
На сайте с 13.11.2009
Offline
251
#10

Типичный ГС с копипастом. Для кого вообще сайт то сделан? Это что такое? https://rentmix.ru/catalog/%D0%A4%D1%80%D0%B0%D0%BD%D1%86%D0%B8%D1%8F/#!/houses/1012013627/description/. И зачем вам https?

Надеюсь, он и не войдет в индекс

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий