- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Добрый день!
В своё время не стал запрещать админку сайта к индексированию, с помощью robots.txt.
В итоге яндекс её проиндексировал. Но естественно в поисковик не добавил.
Есть ли смысл сейчас её запрещать? Правильно ли утверждение, что из-за того, что страницы проиндексированы, но не добавлены в поиск, это влияет на общий вес сайта?
Добрый день!
В своё время не стал запрещать админку сайта к индексированию, с помощью robots.txt.
В итоге яндекс её проиндексировал. Но естественно в поисковик не добавил.
Есть ли смысл сейчас её запрещать? Правильно ли утверждение, что из-за того, что страницы проиндексированы, но не добавлены в поиск, это влияет на общий вес сайта?
Если вы запретите ее индексировать ничего плохого от этого не произойдет, она ведь не имеет никакого значения темболее даже в выдаче нет
shtrihs, Странички админки закрывают от индексации для того что бы не было бесполезных страничек, страничек с дублми, страничек без контента. Большое количество таких страниц может загнать сайт под АГС (десяток страниц конечно не страшно), но все же такие странички лучше закрывать от индексации.
Народ, объясните мне наивному, как это у поисковиков получается проиндексировать админку? Она у вас без пароля и кук доступна что-ли?
Народ, объясните мне наивному, как это у поисковиков получается проиндексировать админку? Она у вас не без пароля и кук доступна что-ли?
Видимо имеется в виду, что проиндексировалась страница авторизации в админку☝
страница авторизации в админку
Так и есть, возможно и еще несколько доступных страниц.
Вот об этом и вопрос! КАК ОНИ ПОПАЛИ В ИНДЕКС?!!!
Вот об этом и вопрос! КАК ОНИ ПОПАЛИ В ИНДЕКС?!!!
Попробуйте любым парсером пройти по сайту (не используя директивы из роботс) и увидите какое количество хлама может улететь в индекс.
Робот может подтянуть и те страницы для которых нужна авторизация, так что далеко не факт что только страницы входа в админку затянул.
КАК ?!!! ВЫ ЧТО, ПАРОЛИ ОТ АДМИНКИ ОТДАЕТЕ ЛЕВЫМ ПАРСЕРАМ?
КАК ОНИ ПОПАЛИ В ИНДЕКС?!!!
Открыты они для индексации, вот и попали.
Я правильно понимаю, что это значит, что страницы админки доступны всем, кто знает их url?