- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Если у меня на сайте существует некая страница, на которую негде нету ссылки, кроме закрытых разделов сайта.
То есть фактически может зайти любой человек, у которого есть ссылка на эту страницу.
Такая страница может попасть в поисковую систему?
Может. ЯндексБар, например передает сведения, еще есть некоторые моменты...
Может, и очень быстро. Проверено недавно.
Страницу вообще реально защитить от индексации?
может добавить её в robots?
apelsinchik, сделайте закрытый раздел, авторизацию.. иначе попадет в индекс.
Хотя знаю 1 случай когда в выдаче яндекса была страница юзера с логином и паролем вместо главной. :)
>> может добавить её в robots?
Смотришь в роботс, и заходишь. ТСу нужно чтобы страницу никто не нашел: не человек и не ПСы.
Смотришь в роботс, и заходишь.
А необязательно писать ее адрес в роботсе полностью.
чтобы страницу никто не нашел: не человек
Про человека ТС ничего такого не написал.
)))) у меня сайт находится в выключенном состоянии. висит 1 страница, на которой написано, "бла-бла-бла все выключено" - эта страница в гугле в топ30....по тематическому запросу, плюс еще одна в топ 50....(по другому). Как это могло случится? Все новое, если чо... и в аддурилки не добавлялось и ссылок, естессно не покупалось))))
pzab, Гугл читает список новых зарегистрированных доменов....
)))) у меня сайт находится в выключенном состоянии. висит 1 страница, на которой написано, "бла-бла-бла все выключено" - эта страница в гугле в топ30....по тематическому запросу, плюс еще одна в топ 50....(по другому). Как это могло случится? Все новое, если чо... и в аддурилки не добавлялось и ссылок, естессно не покупалось))))
Пропишите в htaccess:
SetEnvIfNoCase User-Agent "^Googlebot" search_bot
SetEnvIfNoCase User-Agent "^Yandex" search_bot
SetEnvIfNoCase User-Agent "^Mail" search_bot
Deny from env=search_bot
Можно запретить конкретную страницу. А так запрет действует на весь сайт.
А почему он попал в индекс вопрос хороший, но как работают боты гугла попробуйте у них же и спросить, всмысле тут