Polite Moose, не надоело ломиться в открытую дверь?
Я не говорил, что Яндекс чем-то нам обязан (читайте-таки внимательнее), а лишь то, что я один из его клиентов. Если вам удобнее, не в качестве вебмастера, а в качестве пользователя поисковой системы, которая не находит ресурс. Суть от этого меняется? Нет.
Всех прошу извинить за то, что поддержал оффтопичный спор, уводящий в сторону от проблемы, которая так и осталась неразрешенной, кстати.
Kost, напрасно качающего права с таким энтузиазмом, а также читателей, которые уже 360! раз скачали и прочитали этот тред.
Хм. Какие права? Вопрос был в том, чей это был глюк- мой или Яндекса. И могу ли я что-то сделать, чтобы не допустить их в будущем.
А если кто-то из этих 360 после прочтения решит промониторить индексацию своего сайта, думаю хуже никому не будет.
Спасибо всем ответившим. Мир, дружба, жувачка.
EvgRen, это еще как сказать. Он же должен узнать, что есть такая директория, скажем /abracadabra12345678/
Хотя с другой стороны, если на эту директорию нет прямых ссылок с главной страницы, то и робот ее не найдет, так что нет смысла упоминать.
С третьей стороны, если эта ссылка когда-то была, то Яндекс ее запомнил. Да и Яндекс-сайт шманает по содержимому сервера, а не по линкам.
Короче, есть повод для размышления.
Хм. Интересно.
Если я в robot.txt укажу перечень директорий, запрещенных для индексирования, то любой кулхацкер может его посмотреть и проявить к ним особенное внимание? :(
wolf, действительно ответил намного дружелюбней, чем отвечает обычно
Верю.;)
Случится Вам поплотней столкнуться с его "ненавязчивым" сервисом, Надеюсь, что не случится :(
Cherny, Надо добавить строку Disallow: с пустым значением или удалить вообще все из файла.
Спасибо. Все-таки непонятно, почему они раздавали его в таком виде и как же роботы ходили до сегодняшнего дня...
Спасибо всем за обсуждение.
Scaramush, это уже смешно, в конце концов.
В чем ошибка-то? Если я не хочу ничего запрещать для индексирования?
И потом (повторяю) - это файл, устанавлиемый стандартно вместе с Яндекс-сайт. Как он может быть неправильным с точки зрения Яндекса?
И не умничай, пальцем покажи.(с)
Прокладку поменять надо.
По делу сказать больше нечего?:(
Polite Moose, резонерству - бой! :(
Вы подписывали с Яндексом договор? Денег платили? При чем тут клиент?
Взаимоотношения с Яндексом строятся на основе публичной оферты:
http://yandex.ru/info/termsofuse.html
что является одной из форм договора. А как же иначе?
Если Вы считаете, что договор - только то, "за что уплОчено" или что "с синей печатью", то ошибаетесь. Счет, переданный по факсу - тоже упрощенная форма договора, накладывающая обязательства на поставщика услуг/товара. Оплата такого счета подтверждает мое согласие. Также факт принятия вышеуказанной лицензии равнозначен заключению договора между мной и Яндексом. Причем, заметьте, клиентами Яндекса являются не только владельцы ресурсов, но и пользователи поисковой системы.
Поэтому не надо бросаться словами.
Кроме того, многие из нас размещают на своих сайтах кнопки Яндекса, то есть речь идет о взаимном оказании услуг.
Конкретно у нашего хостера (Zenon) установлена система Яндекс-сайт, наверняка на основе бумажного с печатью договора, Зенон же выставляет нам опосредованную лицензию на ее использование.
Итак, причем тут Яндекс?
Тот факт, что де-факто мы вынуждены пользоваться услугами крупнейшей на сегодня поисковой системы, а Яндекс без нас ничего не потеряет, формальной роли не играет. Хлебзавод тоже не навязывает свои булочки, что не мешает нам жаловаться на их качество...
Мда, что-то я разошелся.;) Хотя это, наверное, принципиальный вопрос.
Sonja, Приведите пример.
Так тот же запрос, как вначале. Рэмблер и гугль выдавали документы исправно, причем дата индексации - около полумесяца назад.
Кстати насчет Яндекса - я что-то путаю, или в прошлом году он тоже выдавал дату индексации, а сейчас - нет?
И все же, еще раз перечтите http://www.yandex.ru/info/webmaster.html, обратите внимание на рекомендации по робот.тхт.
Я же попросил конкретно указать, что у меня неправильно и как это влияет на отсутствие в индексированной базе.
На RTFM послать - это не ответ и вообще некрасиво.:(
dharbari, создайте новую главную страницу по другому адресу, оттуда наделайте линков
И раскручивать в Яндексе еще и этот новый сайт? :(
Если можно, поподробнее, ведь Я. должен присвоить этому новому сайту определенный уровень значимости?
Переименовывать сами индексируемые документы, боюсь, не получится - это будет вводить в заблуждение наших же клиентов.
Marilda, Добавляйте каждую страницу через addurl.
Видимо, так и придется поступать.
Альен, Раз ты не понял о чем я .. ну извини
Да понял, понял. Понял, что ***** этот сервис, раз вокруг него надо с бубном плясать, чтобы работал.
Scaramush,
ничего военного (кроме кейвордов...
Разве что на главной странице. Но это же не криминал. Список слов в таком виде существует с самого начала, тогда (в 98-м) Яндекс еще свои правила не диктовал, вроде количества кейвордов. В остальных документах их адекватное количество.
Указанная тобой страница проиндексирована.
Я отвечаю, что по крайней мере на 25 декабря Яндекс про нее не знал.
По соответствующим запросам вроде находит, я, правда, не специалист и запросы "на глазок" прикидывал.
Вот именно! И я так - "вроде находит, и ладно", а потом как начал повнимательнее проверять, ужаснулся :(
Все-таки постарайся поставить побольше ссылок с тематически близких ресурсов и обновлять контент чаще и все будет в порядке.
С одной стороны - безусловно, но с другой - мы же не новости поп-индустрии печатаем... В наши описания вложен большой труд, и значимость их не уменьшается от того, что они не меняются год или больше.
Единственный возможный вариант интенсификации - надавить на сайты-плагиаторы, чтобы по крайней мере ссылались на нас.
Итак, если криминала не найдено, я делаю вывод, что Яндекс, несмотря на свою раскрученность и известность, работает не лучшим образом. :(
Sonja, я наверное, плохо объясняю :(
А причем здесь Яндекс? Закрывайте от индексации, либо удаляйте старые прайсы.
С точки зрения робота, прайс - обычная страница HTML. Меняется может раза два в месяц. Зачем же их закрывать от индексации? Это противоестественно. Наоборот, хотелось бы, чтобы их находили!
И удалять зачем? Ведь его место занимает новый, с тем же именем. А вот поисковая система выдает кусок текста из поза-поза-позапрошлой версии.
Причем здесь Яндекс? Почему-то гугль или рэмблер действительно "просто работают", без шаманства.
Как давно существует страница?
И об этом я тоже говорил (если речь идет о странице, УРЛ которой я дал). Как минимум с октября 2002 года! А сайт - с 1998 года.
Ответ подробный и дружелюбный, зря Вы так.
Ответ большой, но совершенно не в кассу.
Видно, что она даже одним глазом не смотрела на сайт, на площадку, на которой он расположен, и лишь огульно обвинила меня во всех грехах, начиная от недоступности сайта, динамичного закрытого по прямым ссылкам контента (см. webmaster7.html) и т.п. вплоть до RTFM. Хотя я предварительно потратил три дня на побуквенное изучение ихних доков.
И НИКАКОЙ конкретики. Ну совершенно. Я расцениваю такой ответ как плевок в лицо клиенту.
Но непосредственного отношения к проблеме это не имеет. Косвенное, может быть, т.к. говорит о корпоративной политике. Не удивлюсь, если имел место технический сбой в какой-нибудь БД, но неужели трудно просто сказать - "господа, у вас все нормально, ждите"? Речь ведь не шла о претензиях с нашей стороны.
Robots.txt составлен неправильно, хотя Яндекс и не проиндексировал запрещенные директории или на сайте их и нет… тогда зачем они запрещены?
Не понял вопроса. Чем не нравится файл? Кстати, это стандартный текст, он был прописан не мной, а хостером во время установки службы Яндекс-сайт. В нем ничего не запрещено.
Альен, так же нечестно.
Задача не накрутить счетчик любыми путями, а дать возможность людям найти информацию. А то даже случается парадоксальная ситуация, когда материалы, украденные у нас же, находятся в Яндексе быстрее, чем наш сайт.
Scaramush, я же давал ссылку в начале.
Scaramush
Кто-то что-то недопонял.
Я привел пример страницы, которая обновлялась последний раз 4 февраля (а создана в октябре 2002 года). Но это вовсе не означает, что с тех пор на сайте вовсе не было изменений. Его специфика и не подразумевает ежедневного обновления, последнее изменение было месяц назад.
Так или иначе, если робот заходил даже раз в месяц (я же вижу это по логам, да и некоторые страницы индексированы ноябрем), все равно непонятно, почему не найдены страницы гораздо более старые. ВООБЩЕ не найдены, хотя на них идет прямая ссылка с соответствующей, регулярно обновляемой индексной страницы.
Письмо в саппорт я написал информативное и корректное, поверьте.