Говорите, что через 10 лет Яндекс станет таким как Апорт.
Хотя эта кантора ведет себя странно, но если честно, мне все-таки хочется, чтобы наши сделали что-то достойное из патриотических соображений, и из соображений, что должна быть конкуренция. К сожалению патриотические соображения наверное напрасно, так как по всей видимости там все ровно не «наши» а здоровая конкуренция, все-таки должна быть. А сейчас похоже всех заботит количество денег, а не то, что будет дальше. Все-таки так не правильно, должно все-таки быть какое-то понятие о чести, достоинстве, за свою страну, за то что делали, и что из этого стало. Не все в мире все-таки ради денег должно быть.
Мне жалко Рамблер. А Мэйл ру вроди сделал свой поисковик и там мой сайт есть.
Все-таки хотелось бы какой-то человеческой логики во всем этом, все-таки за этим стоят люди, как посетители, так и работники, а на деле получаеться, даже не знаю как назвать. Как механическая дойная корова, механическое вымя.
Боюсь не кто из работников Яндекса не читал ничего из того, что вы процитировали, потому что забанен он был гораздо раньше, еще до того, как там все это появилось. Потом сменил движок, сменил структур сайта. Как писал забил, и потихоньку развивал, по мере наличия времени.
А про бредовость того, что написано все-таки не думаю что это бред. По моему у меня там все-таки правильно написано. Если сайт делается исключительно для продажи ссылок, не несет смысловой нагрузки, например переведенный автоматом текст, скопированный из других сайтов текст, и тому подобное, при том на странице куча баннеров, всплывающих окон, просматривается код автоматического размещения ссылок, то такой сайт вероятнее всего выкинут из поисковой выдачи.
На этом форуме были сообщения о том, что Яндекс сам закупает ссылки в Сапе и других биржах, и банит сайты, где появляются такие ссылки.
По поводу ссылки на http://www.yourssites.com/misc/jquery.js
А каким образом нужно закрывать такие ссылки?
Мне к сожалению известен только один способ, файл
http://www.yourssites.com/robots.txt
Если не ошибаюсь, строка 23, Disallow: /misc/ сначала документа, которая по умолчанию так и есть в движке закрывает папку misc
Разве не так?
По поводу фильтра за страницу содержащую ключевые слова, но не содержащую текста, это пример из моей жизни. У меня был сайт на Народ.ру, еще очень давно, лет 5 назад. Сайт не относящийся с самолетостроительный, на тему музыки. Там была страница с фотками. В один прекрасный день при заходе на сайт обнаружил, что его отключили. Написал письмо. Получил ответ, что сайт был отключен за поисковый спам на такой-то странице, при том ссылка на страницу содержащую фотографии без описания, alt тэгов, просто фотки, заголовок, и ключевые слова по теме фоток.
Понимайте как хотите, бред, не бред. Закрыл страницу от индексации, сайт больше не блокировали. Это реальный случай. Произошел после того, как разместил страницу фоток и написал для неё ключевые слова, и заголовок H1.
И вы все-таки не ответили на самый главный вопрос.
Каким образом Яндекс узнал о том, что у меня на сайте вредоносный бред, если кроме robots.txt он ничего не загружал больше года? Вы имеете в виду, что бот ядекса маскируется под посетителя меняя user agent ? А почему тогда не показать в панеле, чо обработано столько-то страниц, и загружено столько-то, показать структуру?
Сейчас у меня написано что загружена 1 страница, в индексе 0. Это значит что на самом деле бот Яндеса прошелся по моему сайту, произвел смысловой анализ основного текста, при этом бот не как не хотел себя выдавать, и не показал сколько, когда и какие были загружены страницы на обработку? Не слишком ли это изощренный алгоритм? Если бот действует так как вы намекаете, то зачем тогда вообще у Яндекса есть user agent, описание ботов на страницах самого Ядекса? Уж больно все это изощренно и запутано.
По поводу «забить» о да, я это сделал уже год назад, занимался своей работой, но потом позавчера увидел один сайт, который описан в первом посте, решил написать вопрос, подумал может кто-то чего-то дельное напишет. Боюсь это самый правильный совет. Думаю еще один, а потом третий, четвертый, и так до бесконечности сайт делать бесполезно и не правильно. Если уж хотеть чего-то реально добиться, но наверное правильнее тот что есть развить так, чтобы он быль популярным сам по себе, чтобы там кому-то стыдно стало....
За идею с меню СПАСИБО. Это наверное действительно может быть причиной, и выглядеть как спам. Раньше, там кстати на главной было вместо текста на главной короткие по 300 символов описания всех разделов.
Вот только думается, если закрыть меню, то каким образом поисковик найдет все разделы, по карте xml ?
К тому же содержимое не загружается с сайта судя по логам около года, только карта сайта в txt
Яндекс кстати не обработал и карту сайта в xml после добавления в панеле. Там есть дата добавления, а вместо даты обработки прочерк, это было давно, год назад наверное.
Вот точнее посмотрел 7.05.2011 но перед этим я еще удалял старую оттуда, и добавлял по новой, думал, может новый файл обработаеться.
Еще вычитал такой совет в интернете, что нужно поставить запрет на доступ к сайту бота Яндекса, тогда бот на какое-тов время забудет о сайте, потом через месяц, 2 убрать запрет, и тогда по идее сайт может быть загружен ботом по новой. По идее это может быть расценено как попытка выдать человеку и боту разное содержимое.
Как думаете, это плохая идея, если в .htaccess написать так
allow from all
deny from 77.88.18.192
deny from 95.108.129.207
deny from 93.158.144.27
SetEnvIfNoCase User-Agent "^Yandex" search_bot
<FilesMatch "^.*$">
Order Allow,Deny
Allow from all
Deny from env=search_bot
</FilesMatch>
может если это и не выведет из бана, но хоть изменит где-то какую-то причину по которой сайт не обрабатывается. Думаю еще удалить файл robots.txt если бот только к нему обращается. была идея, Что если бот не найдет этот файл, он может обратиться к чему-то другому.
Просто если бы в панеле вебматер была бы видна структура, было бы хоть раз в 3 месяца загрузка содержимого на анализ, можно было бы думать о каких-то факторах на страницах, а если нет загрузки страниц, нет обработки карты сайта xml на предмет добавления новых страниц, то мало понятно каким образом ситуация может измениться.
Ну все, начались наезды, вместо помощи.
Что зачем писать так и не понял.
Там написано то, что на этом сайте нет неосмысленных текстов зачем вам нужен сайт, потому что человек который ищет что-то по данному вопросу не задается подобным, а ищет перечень решений, которые может использовать для того, чтобы реализовать то, что задумал.
А зачем вы дали ссылку на jQuery которое встроено в движок Drupal?
Эта библиотека чем-то плоха? Как тогда её используют все сайты на данном движке?
Не где не читал, что использование jQuery это плохо. Может вы ссылку имели в виду, или окончание ?e в конце?
Это так система кэширования работает.
Это плохо?
Может напишите тогда, откуда Яндексу известно о подобной ссылке если он в течении нескольких лет посылает примерно вот такой запрос, и все
93.158.144.27 - - [27/Mar/2012:10:52:40 +0400] "GET /robots.txt HTTP/1.1" 200 2120 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
Каким образом определяется качественность, по robots.txt ?
Это случайно не вы забанили мой сайт.
Вообще весьма странное сообщение, нервное какое-то.
Мог бы показать вам примеров напарсеных сайтов с плагиатом, сайтов одностраничников не о чем, кроме того, что мы самые лучшие, но как-то чужие проблемы показывать не хочеться.
Думаю вы все-таки бред написали, потмоу чо у меня на сайте есть много описаний движков, то на чем делают определенные вещи.
может для кого-то это на актуально, и не интересно, но иногда обращаються такие люди, которые вообще ничего не поимают в том, как делаються сайты, для них то что там написано весьма актуально.
Там же написано, что это сайт для людей, которые собираються заказать сайт, или создавать его самостоятельно.
Челвоек решил к прмиеру создать магазин, пошел, посмотрел что есть такие-то и такие-то решения, они отличаються тем-то и тем-то. Дальше челвоек уже полезет смотреть на официальный сайт поддержки, по каталогу модулей, и так далее.
Не понятно, что те так, и что пустого?
IP не забанен. На этом IP есть много проиндексированных сайтов. Скорее всего что-то другое.
Новый сайт делать не буду, так как кто его знает, если причина не ясна, то шанс того, что с новым сайтом будет то же самое очень вероятен.
Странно. Судя по ответам действительно сложный вопрос, за что мой сайт так попал в какой-то список.
По поводу офиса, меня самого это улыбвает грустно, прсото не понимаю что за ткая напасть неизлечимая и не объяснимая в течении 2-х лет и более.
Насчет IP в бане, это интересно. Вечером посмотрю все сайты на этом IP есть ли какиенибудь в индексе. СПАСИБО за идею.
Е не батенька, есть Яндекс, который позиционирует и пиарит себя для неосведомленных в интернете людей, как некое единственное зеркало российского сегмента интернета. Которое преподносит себя как лучшее детище лучших российских умов, которое заботится о пользователях, о каждом, и стремится выдавать им самые правильные и качественные сайты.
Стоны не раздаются, раздаются опасения о том, что через какое-то время в российском сегменте интернета будет так как и в российской действительности, если есть крыша, тогда порядок, а так, иди в сторонку по добру, по здорову. Народ та у нас 100 лет назад еще барину кланялся, в то время как в так называемых развитых странах уже чего-то делали. Где ж он сам то разберется что да как. Запиарят же, как детей малых со своей заботой...
Дай волю нашим ребятам, так они сделают вам свой рунет, отключат от мира и от конкурентов. И наблюдать равнодушно и молча за этим не правильно. Конкуренция. Тогда пусть конкурируют, а не выдерживают, так это не наша вина. Напротив. Думаю большинство мастеров из рунета было бы за свой лучший поисковик и было бы радо, если можно было бы гордится, а так, правильно «Есть Яндекс - которому интересен в первую очередь доход» забыв о своей предназначенности. Так ребята далеко могут зайти в своих интересах....
Понимаете, это наша страна, наша жизнь, наша общая репутация на весь мир, и много чего еще, что делают другие в «своих интересах» а в то же время отдуваться за это всем приходится. Странно, что Гугл получается не так заинтересован своей прибылью, а в конечном этоге получается, что у них денег больше, и наши с ТВ кригат, что нужно Гугл закрыть для рунета. Это наверное повод задуматься о чем-то.
Извиняюсь за долгое отсутствие, и несвоевременный ответ.
Уважаемые профессионалы, вы пожалуйста не ругайтесь, тем более по мелочам, нервы дороже.
По поводу темы, примерно понятно. Меня, как писал интересовал вопрос не столько касаемо моего сайта, а общая тенденция развития российских поисковых систем. Как кажется на мой взгляд, у них просто не хватает вычислительных ресурсов, чтобы обработать сайты рунета, не говоря уже о каком-то международном поиске. Отсюда думаю изобретение всяких фильтров, отказ загружать полностью содержимое с некоторых сайтов на основании неких алгоритмов и всякие тому подобные вещи. Потому что если бы не было проблем, то можно было бы поставить сайты на последние места, исключить по каким-то запросам, а тут тенденция такова, что отбираются некое количество сайтов, вероятно по возрасту, по начальному до отработки технологии посещению, и оставляется, а чтобы исключить остальные придумываются всякие интеллектуальные алгоритмы проверки смысловых дублей и подобное. В конечном итоге не до конца однозначно, ради чего все это.
Что касаемо моих сайтов, то что там показывать, сайты как сайты. Реалии таковы, что без загрузки всего содержимого, без периодической проверки новых новых материалов алгоритмы именно и только российских систем приняли решение не загружать и не анализировать данный сайт, в то время как с Гуглом, Яху, и остальными все хорошо.
Если к вопросу о том, как вернуть сайты, такой вопрос не ставился. Как видно из фактов, сделать это можно как угодно, только не следуя рекомендациям о развитии сайта и наполнении его уникальным содержимым. А выход видится только в неких способах влиять на алгоритм всякими уловками и ухищрениями. Гадать на гуще и вакууме не в коем случае не надо. Интересовал взгляд профессионалов именно на репутацию, добросовестность и следование своим же правилам например «Яндекс не цензор» и в таком духе.
Как понял, на это тут не кто ничего сказать не может, потому что если Яндекс выкинул сайт министерства транспорта, если не ошибаюсь, то он очень даже строгий цензор, а посему отношение и способы решения проблем следует выбирать соответствующий, не как не по правилам написанным там, и правилам марали.
На этом думаю вопрос в данной теме исчерпан.
Нет, 30.
Это к чему?
У Яндекса что, на возраст владельца тоже есть фильтр?