- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
А где про Я-ботов написано?
http://forum.yandex.ru/?id_note_forum=1045947
Тестирование мобильных приложений и сайтов (/ru/forum/1032925) https://www.facebook.com/ostmaster (https://www.facebook.com/ostmaster)
А с Апортом у меня вообще весело.
На одном из сайтов из всех страниц, он знает лишь 1.
В самой цифре нет ничего удивительного,
Интересно другое: это единственный .pdf на весь сайт.
Опережая вопросы - содержимого не знает, только url.
Можно ли на Аппорте принудительную переиндексацию устроить?
Честно говоря, сюда робот Апорта ходит как на работу. Т.е. 9 тысяч страниц за две недели - это вполне нормально уже. Провал по посещаемости был, но вроде вернулось на прежний уровень.
А это, наверное, когда misha сюда заходит, он своего робота вместе с собой прихватывает. :D
А у меня вообще сёдня кол-во хитов и хостов в 2 раза выросло....странно однако :)
не иначе :) у меня вот Апорт взял 90 страниц из 1300 -- и всё :) И никак этого робота не переубедить. Как следствие -- 2-4 посетителя в день с Апорта :) Это при том, что только с lib.ru (и зеркал) в сумме за два десятка :)
Вопросик такой у меня: даты, указанные в "оценке доступности" (она по нажатию кнопочки апортовской выдается) связаны с посещениями робота (к сожалению, доступа к логам сервера у меня нет)?
Ostmaster: у меня было то же самое, но с зипом :). Вылечилось убиранием с одного из фреймов js-редиректа. А убрал после того как ине прислали следующее:
Порядок индексации и ограничений на индексацию сайтов поисковым роботом Апорта:
Поисковый робот Апорт не индексирует и не видит:
- ссылок, сделанных через javascript, флэш или форму (select и т.п.). Соответственно, страницы, на которые можно попасть только по таким ссылкам не индексируются.
- индексирует динамические страницы или страницы, содержащие символ “?” в адресе в ограниченном для каждого сайта количестве. Размер квоты зависит от конкретного сайта (в частности, от его индекса цитируемости) и может, в частности, быть нулевым.
- не индексирует страниц, содержащих в адресе символы “%” и “#”
- не индексирует страницы в кодировках Macintosh 10007 (Mac), IBM 866 (DOS), ISO 8859-5 и UTF8 (Unicode), а также страницы в неопознанных кодировках (последнее не касается страниц на украинском или белорусском языке и языках, использующих преимущественно латинский алфавит).
- отсеиваются страницы в испорченной кодировке и страницы, на языках, сильно отличающихся от русского и использующих при этом нелатинский алфавит
- отсеиваются страницы, которые выходят за пределы сайта (домена)
- отсеиваются редиректы начальных страниц
Вопросик такой у меня: даты, указанные в "оценке доступности" (она по нажатию кнопочки апортовской выдается) связаны с посещениями робота (к сожалению, доступа к логам сервера у меня нет)?
Нет.
Ostmaster: у меня было то же самое, но с зипом :). Вылечилось убиранием с одного из фреймов js-редиректа.
Есть одно небольшое но.
Ни фреймов, ни редиректов, ни скриптовых ссылок (за исключением тех, которые именно ТАК и планировались) там нет и никогда не было.
Т.е. вариант, когда пауку НЕКУДА более идти, кроме как на ссылку на файл отпадает.
И зип, всеж не пдф.
Т.е. любопытным было не отсутсвие других страниц, а наличие пдф-ки в базе.
Ну я согласен, что у меня необязательно дело было в редиректе. Просто чистка кода и полноценная индексация произошли друг за другом, и связь между ними как-то напросилась.
Мне непонятно, какая разница поисковику между пдф и зипом, он не должон индексировать ни того, ни другого.
А общий вывод, который напрашивается, у Апорта есть глюк, когда вместо HTML-страниц, индексируется "левый" файл, потому что теперь этого зипа НЕТ в списке проиндексированных страниц.