- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Есть молодой сайт.
Тематика - "Ответы на вопросы о Виндовсе".
Каждая заметка на сайте ответ на популярный вопрос о виндовсе на 500-700 знаков без пробелов уникального авторского текста.
В первый же ап Яндекс захавал морду, начал шерстить по внутрякам, но кроме морды в индексе другие страницы не были.
На третий ап и морда с индекса вылетела.
Ссылок не закупал. Кроме добавления новых заметок вообще ничего не делалось с сайтом.
Где то после второго апа (морда еще была в индексе) был сменен robots на
Disallow:
Disallow: /category/osajte
Disallow: /osajte.html
Disallow: /login
Disallow: /register
Disallow: /cgi-bin
И уже после третего апа и морда выветела с индекса.
На четвертый ап в индекс ничего не попало.
Выпала иза смены роботса или может какие другие причины?
Спасибо!
п/с раньше такого никогда не было с другими сайтами.
User-agent: *
Disallow:<----------------------------------- 🤪
Disallow: /category/osajte
Disallow: /osajte.html
Disallow: /login
Disallow: /register
Disallow: /cgi-bin
Это жесть, вы запретили индексировать сайт!
Это жесть, вы запретили индексировать сайт!
А вы точно уверены, что
запрещает индексацию сайта?🍿Да, проблема не в этом... пустой диссалоу не запрещает ничего!
Это жесть, вы запретили индексировать сайт!
запрещает индексацию сайта?
Ничего не запрещает. Запрещает индексацию
javadf добавил 08.11.2011 в 12:01
И для проверки robots.txt есть http://webmaster.yandex.ru/robots.xml, там можно посмотреть запрещена страница или нет.
Не должно, вам бы в суп.
просто
User-agent: *
Disallow:
ничего не запрещает
в чем же проблема выпадения даже морды?
п/с уже не говоря о индексации внутряков
joost добавил 08.11.2011 в 13:33
тулс яндекса http://webmaster.yandex.ru/robots.xml
говорит, что osajte.html тоже разрешено
разве Disallow: /osajte.html не запрещает?
ну так попробуйте уберите этот дисалоу пустой
убрал уже вчера
Изменения в robots.txt нормальные. Тут просто обычный глюк в алгоритме при условии конечно, что сайт не откровенный ГС.
Мой 2-х летний тоже выпал весь полностью. Я помимо robots.txt ещё и поменял структуру урлов практически на всех страницах. Обновил движёк, так сказать, удачно)). Все старые урлы корректно перенаправляются 301 на новые. В корректности уверен. Просто глюк.
Написал роботу-платону , чего и Вам советую. Шансы минимальные, но...
Это жесть, вы запретили индексировать сайт!
Да Вы знаток, батенька))
docadept добавил 09.11.2011 в 09:40
По теме - историю домена смотрели? Вполне может оказаться, что он уже зафильтрован был еще до того, как Вы его зарегистрировали.
Да Вы знаток, батенька))
Ага, поторопился, не заметил что сплеша нет :o