- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
У меня случилась такая проблема, у меня был сайт, работал пару лет, стоял на домашнем серваке, в связи с переездом в другое место жительства, сайт не работал в течении где то 3-4 месяцев, я в новом жилье заказал статику, завел сервер, все работает, но в гугл вебмастере страницы ушли из индекса (но это можно понять почему), но проблема в том что он говорит что он не может достучаться до robots.txt, в то время как с доступом проблем нет, возвращается код 200, в содержании файла нет ошибок, все как надо. (ссылка: home-android.ru/robots.txt)
Сказать что что-то блокирует бота - нельзя, т.к. антивир, фаервол выключены. Скриншоты с вебмастера приаттачил. Не пойму, почему он не может получить доступ к robots.txt
История довольно увлекательная, но у меня тоже ругается на robots.txt. Мне тоже не понятно, что Гугл не устраивает :)
В Яндексе все нормально. Там просто нечему быть неправильно!
frimost, а как решилась проблема? как с индексацией? ведь там написано что пока он не получит доступ к robots.txt - не начнет индексировать сайт!
У меня ругается в панели на robots.txt , но это не мешает сайту индексироваться.
Видимо, у Вас проблема в чем-то другом.
---------- Добавлено 19.10.2014 в 20:48 ----------
Дословно у меня ситуация такая: ругается на структуру, но в то же время Доступ к файлу robots.txt имеется!
frimost, у меня проиндексировано 171 страница, это с самого начала так изменений не заметил. в панели главной написано что нет доступа к robots.txt и "Сканирование отложено, потому что файл robots.txt был недоступен."
Весь прикол в том, что robots и sitemap призваны облегчить работу поисковых роботов, но это не обязательно требование. Как вариант - что то с правами именно этого файла, может он не доступен на чтение.
Но глобально не должно влиять на индексирование. По сути, Вы в файле запрещаете какие-либо разделы, а так индексируется все подряд.
frimost, с правами доступа проблем нет. по запросу файл нормально отдается (HTTP 200)
теперь такие письма мне приходят от гугла
Кстати с яндексом походу такие же проблемы: