Nexxus604, ладно мусор в выдаче, так тут "тема не раскрыта" на выводимом сайте :)
Может уже и не так интересно. Но есть еще чудесный запрос:
"производство светильников" и "профессиональный свет"
И выдается сайт vProsvet
Чтение наших статей происходит не через "засраные твиттеры", а через группу в ФБ, в которой сидят в основном такие же психологи, они же регулярно посещают сайт, проверяя наличие новых текстов. (что, иногда, создает отказы, так как наличие текстов видно уже с главной странички). А также с сайтов посвященных психологии, таких как б17, allpsy, psynavigator и т.п. (да, там много тлена, написанного теми, кто, недавно обучившись психологии на каких-нибудь курсах, возомнил себя целителем душ человеческих, но там также много качественных текстов, не для "продвижения себя", а для общения внутри сообщества).
А "найти" новый текст, который еще не попал в индекс довольно проблематично, если человек еще не знает о сайте. Здесь могу только присоединиться к вопросу temp3128.
Но лучше, постараюсь переключиться в соответствующую тему, чтобы здесь не отходить от темы быстроробота :)
Вот у людей проблемы с быстрым индексом, а мы столкнулись с нежеланием яндекса индексировать уникальные тексты по несколько недель. Самое забавное, что часть текстов, после индексации (по прошествии пары недель) размещается на тематических площадках (не за деньги) и на этих площадках попадают в топы среди самых читаемых. Публикуются в их дайджестах и электронных журналах. Но на нашем сайте отказываются быстро попадать в индекс.
Неужели поведенческие? И по 5 минут на сайте для одного человека мало?
Я вас понял. Придется спорить с хозяином сайта. Спасибо.
Нормальным роборс не считаю. Я назвал его "стандартным". Так-то там многое не закрыто - это факт. Но обнулил для проверки.
1. Абсолютно стандартный роботс.. Обнулил его до стандарта как раз из-за того, что индекс то есть, то его нет.
2. Двух последних фирм просто нет в каталоге. Как появится, сразу будет рабочая ссылка.
Спасибо за ответ. Неужели из-за неработающей ссылки (не выдающей ошибку, а просто не активной) могут быть проблемы с индексацией?
И да, неделю назад изменил немного адреса, потому некоторые ссылки из описаний кондиционеров выдают ошибку, не все успел поправить - это причиной не называть, ранее не было ни одной битой ссылки на сайте.
Моя ошибка. Я не совсем точно описал проблему: иногда, страницы в индеске появляются (практически все), но через пару-тройку дней, иногда к следующему апдейту, они вновь выпадают. Последний месяц стабилизировалось на 35-40 страницах.
Это я понимаю, вот только дублей этой странички на сайте нет. То-то и странно.
А код очистил как мог. Даже проверял на валидность.
Всем добрый день. Прошло довольно много времени, сайт на битриксе копал, но медленно, сейчас примусь за него вплотную, однако, за это время столкнулся с полным непониманием.
Некоторые статьи на сайте (не мои) до сих пор не проиндексированы яндексом! При этом они не запрещены к индексации и доступны.
Возможно кто-то сможет мне подсказать, что именно не так в этом сайте: http://4avto.ru
Оговорюсь сразу, знаю о проблемах с Навигационной цепочной и фильтром в разделе товаров (беда криворукого программера, а нового компания не желает искать). Возможно кто-то сможет подсказать, как избавиться от лишних звеньев в этой цепочке, хотя бы намекнуть на правильный ход мыслей.
robots.txt:
User-agent: * Disallow: /wheels/ Disallow: /bitrix/ Disallow: /search/ Disallow: /auth/ Disallow: /auth.php Disallow: /personal/ Disallow: /*/search/ Disallow: /*PAGEN* Disallow: /*PAGE_NAME=search Disallow: /*PAGE_NAME=user_post Disallow: /*PAGE_NAME=detail_slide_show Disallow: /*/slide_show/ Disallow: /*/gallery/*order=* Disallow: /*?print= Disallow: /*&print= Disallow: /*register=yes Disallow: /*forgot_password=yes Disallow: /*change_password=yes Disallow: /*login=yes Disallow: /*logout=yes Disallow: /*auth=yes Disallow: /*action=ADD_TO_COMPARE_LIST Disallow: /*action=DELETE_FROM_COMPARE_LIST Disallow: /*action=ADD2BASKET Disallow: /*action=BUY Disallow: /*print_course=Y Disallow: /*bitrix_*= Disallow: /*backurl=* Disallow: /*BACKURL=* Disallow: /*back_url=* Disallow: /*BACK_URL=* Disallow: /*back_url_admin=* Disallow: /*index.php$ Disallow: /login/ Disallow: /*SHOWALL* Host: 4avto.ru
Страница вроде этой http://4avto.ru/articles/tires-for-trucks/ не индексируется уже около двух месяцев.
А как вы определяете "вроде бы передается"? Т.е. мне правда интересно как это можно сделать..
А смысл вообще закрывать "лишнюю" страницу? Естественно, если это не дубль.. Разве плохо, когда одна страница ведет на серию других, разве она чем-то мешает?