ZeeRaN: Не стоит из-за одного срача уходить с форума. Тут всегда так.
Проще заново зарегистрироваться, правда?
donc: Этак сплоги могут отмазываться- мы мол воруем, тащим к себе вашу инфу, ставим ссылку (и ставят ведь, поганцы, иногда) а если вам не нравится - забаньте нас в .htaccess Ну а если вы не знаете, что это, это не наши проблемы- есть мануалы.
Ну, да, сплог - это начинающийся поисковик, только индексирует, ну и кеш показывает на отдельных страницах, даже по рубрикам сортирует для удобства пользователей. Зеркало рунета. Все как у взрослых) У некоторых даже свои бары есть - ставятся вместе с cms, игрухой или варезом.
Tarry: ну связь-то точно паршивая - по Москве даже не везде ловит.
А в Питере норма, с тех пор как был еще nwgsm до экспансии московских операторов.
Kost: Почему стремление Яндекса предоставить пользователю поиска максимально полную и свежую информацию вы называете раздолбайством?
Потому что это стремление принесло вред пользователям, так как алгоритма определения технических или приватных страниц нету. У мегафона тоже стремление было, а теперь сервис не доступен.
Kost: Все, Мегафон покатил бочку на Яндекс, с больной головы на здоровую. Объявлен поиск виноватых.
Они как будто топик читают. Все, буду молчать.
www.bbc.co.uk 17:38 MCK: "Файл robots.txt работает со всеми поисковыми системами, однако остается вопрос: почему "Яндекс" позволил именно эту информацию, которую он забирал, публично разместить на своих поисковых серверах", - заявил Ермаков.
Ёхан Палыч 17:26 : Ну и в который раз уже: урлы приватные, не известные никому кроме автора, также как и ВСЕМ поисковикам, для которых роботса тоже нету, но в индекс попали ТОЛЬКО Яндекса (не самого быстрого и умного), по причине чего? Правильно, по причине утечки через шпионский софт.
Kost, а мне не нравится, когда из-за раздолбайства (да, я не обеляю мегафон, этож надо было додуматься на странице статуса простой смс писать еще и ее текст и даже номер) одного админа катят бочку на всю контору, мол, и сервис говно, и связь то не очень, и ваще...
При этом это раздолбайство не является политикой организации. А у Яндекса является, впереди планеты всей, пронырливые боты, ПФ, и "слежка" в прямом смысле.
Kost: Чтобы словить страницу с СМС-кой, нужно очень оперативно узнать ее адрес и прислать робота. А Яндекс-бар оперативно сообщает эти урлы роботу, но не передает в Гугл. Или передает их с опозданием, когда там уже нет никаких СМС-ок.
Спрошу по другому: почему яндексбар позволяет натравливать бота на страницы без внешних ссылок (когда это является условием индексации по утверждению самого яндекса), а гугл со своим софтом не придерживается такой политики?
ZeeRaN: против гугла ничего не имею. Неплохой поисковик
Так почему в кеше у него ничего не было как и у других поисковиков помельче?
Ёхан Палыч добавил 19.07.2011 в 18:00
Kost: Возьмите имена ваших секретных папок, откиньте пару букв с конца и пропишите в robots.txt . И никто не догадается.
Это и так очевидно, танцы с бубнами, приходится изголяться как и запароливать на всякий, хотя никаких баров у меня нет.
Не надо думать, что я первый месяц на форуме. Хотя, для любого начинающего вебмастера тема полезная, а таких тем надо знать сотни, чтобы подстраиваться под конкретно Яндекс, когда по идее должно быть наоборот. Вот ведь основная масса пользователей не в курсе слежки через бар, ставят, не думают. Также как и основная масса "вебмастеров" никогда не слышала о роботсе.
basilic: Гугл технически менее развит, поэтому не может себе позволить разработку такого уровня продуктов.
Понятно, Яндекс - мегапоисковик, мегафон с гуглом - фуфло.
Задавили авторитетом.
ZeeRaN: Тут оферта не нужна для согласия. Перед тем, как создавать проект нужно ознакомиться с информацией по индексации поисковиками самостоятельно, так же узнать, не передает ли данные регистратор доменов, хостер.
У меня на разных хостах есть папки с тестовыми скриптами, для частного пользования, и я не обязан закрывать (светить) их роботсе. Главный принцип индексирования для пауков - переход по ссылкам, а не мониторинг, нет ссылки - нефиг шляться.
ZeeRaN: Вы не понимаете. Отсутствие роботса разрешает яндексу брать все, что угодно в свой индекс. Это интернет, правила тут такие.
Это вы не понимаете. Никто не обязан ставить robots.txt на сайте, также как и писать на спине "я не хочу быть изнасилованной", "я против разбоя", "сегодня денег не дам".
Ну и в который раз уже: урлы приватные, не известные никому кроме автора, также как и ВСЕМ поисковикам, для которых роботса тоже нету, но в индекс попали ТОЛЬКО Яндекса (не самого быстрого и умного), по причине чего? Правильно, по причине утечки через шпионский софт.
ну так и в чем тогда разница между яндексом и сплогом?
Разница в том, что на яндекс рыпаться нельзя - моськой обзовут. А так никакой.
Хотел поискать тут в других поисковиках кеш роботса или просто смс, так у большинства вообще кеша нету - отсталые.
Не стоит из-за одного срача уходить с форума. Тут всегда так.
Проще заново зарегистрироваться, правда?
Этак сплоги могут отмазываться- мы мол воруем, тащим к себе вашу инфу, ставим ссылку (и ставят ведь, поганцы, иногда) а если вам не нравится - забаньте нас в .htaccess
Ну а если вы не знаете, что это, это не наши проблемы- есть мануалы.
Ну, да, сплог - это начинающийся поисковик, только индексирует, ну и кеш показывает на отдельных страницах, даже по рубрикам сортирует для удобства пользователей. Зеркало рунета. Все как у взрослых) У некоторых даже свои бары есть - ставятся вместе с cms, игрухой или варезом.
Хотя я не знаю, может быть это можно как-то изменить, но мне однажды нужно было скрыть изменение одного файла, я не нашел как это сделать.
Время в виндах поменяйте, редактируйте и заливайте.
Админы мегафона продолжают тупить - роботса на основных сайтах нету. Точнее "есть" пустые. http://spb.megafon.ru/robots.txt http://moscow.megafon.ru/
ну связь-то точно паршивая - по Москве даже не везде ловит.
А в Питере норма, с тех пор как был еще nwgsm до экспансии московских операторов.
Почему стремление Яндекса предоставить пользователю поиска максимально полную и свежую информацию вы называете раздолбайством?
Потому что это стремление принесло вред пользователям, так как алгоритма определения технических или приватных страниц нету. У мегафона тоже стремление было, а теперь сервис не доступен.
Все, Мегафон покатил бочку на Яндекс, с больной головы на здоровую. Объявлен поиск виноватых.
Они как будто топик читают. Все, буду молчать.
"Файл robots.txt работает со всеми поисковыми системами, однако остается вопрос: почему "Яндекс" позволил именно эту информацию, которую он забирал, публично разместить на своих поисковых серверах", - заявил Ермаков.
Ну и в который раз уже: урлы приватные, не известные никому кроме автора, также как и ВСЕМ поисковикам, для которых роботса тоже нету, но в индекс попали ТОЛЬКО Яндекса (не самого быстрого и умного), по причине чего? Правильно, по причине утечки через шпионский софт.
Kost, а мне не нравится, когда из-за раздолбайства (да, я не обеляю мегафон, этож надо было додуматься на странице статуса простой смс писать еще и ее текст и даже номер) одного админа катят бочку на всю контору, мол, и сервис говно, и связь то не очень, и ваще...
При этом это раздолбайство не является политикой организации. А у Яндекса является, впереди планеты всей, пронырливые боты, ПФ, и "слежка" в прямом смысле.
Да, басня в самый раз, не извиняйтесь.
Чтобы словить страницу с СМС-кой, нужно очень оперативно узнать ее адрес и прислать робота.
А Яндекс-бар оперативно сообщает эти урлы роботу, но не передает в Гугл.
Или передает их с опозданием, когда там уже нет никаких СМС-ок.
Спрошу по другому: почему яндексбар позволяет натравливать бота на страницы без внешних ссылок (когда это является условием индексации по утверждению самого яндекса), а гугл со своим софтом не придерживается такой политики?
против гугла ничего не имею. Неплохой поисковик
Так почему в кеше у него ничего не было как и у других поисковиков помельче?
Ёхан Палыч добавил 19.07.2011 в 18:00
Возьмите имена ваших секретных папок, откиньте пару букв с конца и пропишите в robots.txt . И никто не догадается.
Это и так очевидно, танцы с бубнами, приходится изголяться как и запароливать на всякий, хотя никаких баров у меня нет.
Не надо думать, что я первый месяц на форуме. Хотя, для любого начинающего вебмастера тема полезная, а таких тем надо знать сотни, чтобы подстраиваться под конкретно Яндекс, когда по идее должно быть наоборот. Вот ведь основная масса пользователей не в курсе слежки через бар, ставят, не думают. Также как и основная масса "вебмастеров" никогда не слышала о роботсе.
Гугл технически менее развит, поэтому не может себе позволить разработку такого уровня продуктов.
Понятно, Яндекс - мегапоисковик, мегафон с гуглом - фуфло.
Задавили авторитетом.
Тут оферта не нужна для согласия. Перед тем, как создавать проект нужно ознакомиться с информацией по индексации поисковиками самостоятельно, так же узнать, не передает ли данные регистратор доменов, хостер.
У меня на разных хостах есть папки с тестовыми скриптами, для частного пользования, и я не обязан закрывать (светить) их роботсе. Главный принцип индексирования для пауков - переход по ссылкам, а не мониторинг, нет ссылки - нефиг шляться.
Если согласны на индексацию поисковиками, то не обязаны.
А есть где-нибудь оферта, что согласен? Лучше скажите, почему в гугле кеша не было?
Kost, вы считаете, что мои аналогии много хуже других?
Яндекс-бар не передает инфу о посещенных урлах Гуглу.
Смешно)
Вы не понимаете. Отсутствие роботса разрешает яндексу брать все, что угодно в свой индекс. Это интернет, правила тут такие.
Это вы не понимаете. Никто не обязан ставить robots.txt на сайте, также как и писать на спине "я не хочу быть изнасилованной", "я против разбоя", "сегодня денег не дам".
Ну и в который раз уже: урлы приватные, не известные никому кроме автора, также как и ВСЕМ поисковикам, для которых роботса тоже нету, но в индекс попали ТОЛЬКО Яндекса (не самого быстрого и умного), по причине чего? Правильно, по причине утечки через шпионский софт.