- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Вот последние заходы на сайт:
*
/robots.txt
Http Code: 404 Date: Jul 20 21:18:04 Http Version: HTTP/1.1 Size in Bytes: -
Referer: -
Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
*
/?cat=6
Http Code: 200 Date: Jul 20 22:20:28 Http Version: HTTP/1.1 Size in Bytes: 9478
Referer: -
Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
*
/?m=201007
Http Code: 200 Date: Jul 20 23:23:34 Http Version: HTTP/1.1 Size in Bytes: 8664
Referer: -
Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
Я так понимаю это робот Яндекс шарится по моему сайту? Что же он тогда не индексирует его?
Вот последние заходы на сайт:
*
/robots.txt
Http Code: 404 Date: Jul 20 21:18:04 Http Version: HTTP/1.1 Size in Bytes: -
Referer: -
Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
*
/?cat=6
Http Code: 200 Date: Jul 20 22:20:28 Http Version: HTTP/1.1 Size in Bytes: 9478
Referer: -
Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
*
/?m=201007
Http Code: 200 Date: Jul 20 23:23:34 Http Version: HTTP/1.1 Size in Bytes: 8664
Referer: -
Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
Я так понимаю это робот Яндекс шарится по моему сайту? Что же он тогда не индексирует его?
Бот всегда шарится на сайтах, даже на тех которые в Бане , так что это не показатель чего-либо. А почему сайт не индексируется - это Вам лучше задать вопрос в службу поддержки Яндекса. ;)
killuall87, а почему робот Яндекса получил ответ 404 при обращении к robots.txt?
Робот Яндекса может шарится и позабанненым сайтам.
Что же он тогда не индексирует его?
Раз шарится, то может все таки начал индексировать?!
Бот зашел - загрузил страницы и исключил их... шутка такая...
А так бот условно может неделями заходить, а в индексе появится через месяц.
killuall87, а почему робот Яндекса получил ответ 404 при обращении к robots.txt?
Робот Яндекса может шарится и позабанненым сайтам.
Раз шарится, то может все таки начал индексировать?!
404 наверное потому, что у меня нет файла robots.txt, да и зачем он мне нужен этот файл если разрешен доступ ко всем страницам?
у меня по агснику бот шарится каждый день. ждет когда я исправлю все навреное..