Slurpом представляется не только бот самого Яху, но и всех компаний, лицензировавших у них поисковую технологию, не говоря уже о мимикрии всяких спамоботов. Смотрите по принадлежности IP, кому принадлежит эти диапазоны адресов.
Ночью электрики чинили подстанцию, вполне возможно, что смотрели сайт в это время...
snoopckuu:
itman, сразу бы хотелось добавить сколько я не крутил датапарк да и судя по отзывам никому кроме максима не удавалось проиндексировать такое кол-во документов :), там слишком много нюансов в настройке да и самая большая их беда кроме того что использует Mysql это то что новые билды бывают не поддерживают старую БД и с новым билдом поисковика надо делать ребилд всей базы :(.
Последнее изменение, требовавшее полной переиндексации было около двух лет назад, все остальные изменения касались добавления новых таблиц или столбцов в существующие таблицы, что вполне решается средствами SQL-сервера.
Все крупные успешные инсталяции используют PostgreSQL, а не MySQL. Наиболее крупная работающая инсталяция, извесная мне, насчитывает около 19 млн. страниц, правда всреднем примерно в 3 раза меньших по размеру среднестатистиченеской интернет-страницы.
А еще состоялся первый заход с какой-то новой российской поисковой системы, но по поводу нее до сих пор никто не открыл ни одного топика кажется =) Ждемс опять же.
Новости поисковика Вершки Рунета: проиндексированы сайты из каталогов Rambler Top100, YACA, Liveinternet.ru, индексируются только сайты второго уровня, некоторые "особые" домены типа org.ru, net.ru, msk.ru и т.п. при этом считаются первым уровнем, всего набралось чуть более 335 тыс. таких сайтов. Также начали индексироваться заглавные старницы сайтов из ex-USSR.
ХренРедькиНеСлаще: Тут ведь
Это функции страницы, а на странице может быть МНОГО h1-h6
не суть важно, хоть мульён, лишь бы было гд хранить :)
ХренРедькиНеСлаще:
Как вместить в один description все новости дня?
одна новость - одна страница, заголовок - в заголовок, анностацию - в meta.description, ну а саму новость целиком - в тело. И всё, никаких замарочек с сованием всего на одну страницу.
Slurpом представляется не только бот самого Яху, но и всех компаний, лицензировавших у них поисковую технологию, не говоря уже о мимикрии всяких спамоботов. Смотрите по принадлежности IP, кому принадлежит эти диапазоны адресов.
Ещё одна новая фича, цветная карта Рунета "Рухоль": http://www.43n39e.ru/ruhole
Disell, отнюдь не битая, а рабочая.
Ночью электрики чинили подстанцию, вполне возможно, что смотрели сайт в это время...
itman, сразу бы хотелось добавить сколько я не крутил датапарк да и судя по отзывам никому кроме максима не удавалось проиндексировать такое кол-во документов :), там слишком много нюансов в настройке да и самая большая их беда кроме того что использует Mysql это то что новые билды бывают не поддерживают старую БД и с новым билдом поисковика надо делать ребилд всей базы :(.
Последнее изменение, требовавшее полной переиндексации было около двух лет назад, все остальные изменения касались добавления новых таблиц или столбцов в существующие таблицы, что вполне решается средствами SQL-сервера.
Все крупные успешные инсталяции используют PostgreSQL, а не MySQL. Наиболее крупная работающая инсталяция, извесная мне, насчитывает около 19 млн. страниц, правда всреднем примерно в 3 раза меньших по размеру среднестатистиченеской интернет-страницы.
http://sochi.org.ru/ - поиск по сайтам, относящимся к городу Сочи.
А еще состоялся первый заход с какой-то новой российской поисковой системы, но по поводу нее до сих пор никто не открыл ни одного топика кажется =) Ждемс опять же.
И какой адрес у этой новой системы ? :)
Списки поисковиков по странам:
http://www.searchenginecolossus.com/
Но поддержка русского есть только у live.com
Для английского выдача совпадает абсолютно.
Объясните, почему выбрано такое доменное имя? Что оно означает? Возможно, я чего-то не понимаю?
Подсказка: http://34n118w.net/ :)
Новости поисковика Вершки Рунета: проиндексированы сайты из каталогов Rambler Top100, YACA, Liveinternet.ru, индексируются только сайты второго уровня, некоторые "особые" домены типа org.ru, net.ru, msk.ru и т.п. при этом считаются первым уровнем, всего набралось чуть более 335 тыс. таких сайтов. Также начали индексироваться заглавные старницы сайтов из ex-USSR.
Посвилась добавлялка: http://www.43n39e.ru/add
А также облако популярных запросов за неделю: http://www.43n39e.ru/cloud
Тут ведь
Это функции страницы, а на странице может быть МНОГО h1-h6
не суть важно, хоть мульён, лишь бы было гд хранить :)
Как вместить в один description все новости дня?
одна новость - одна страница, заголовок - в заголовок, анностацию - в meta.description, ну а саму новость целиком - в тело. И всё, никаких замарочек с сованием всего на одну страницу.