- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Доброго всем времени суток.
Помогите, пожалуйста, разобраться.
Допустим, есть такая ситуация.
На сайте сайт1.ru есть раздел razdel, который запрещен к индексации в файле robots.txt. В этом разделе размещена страница stranica.htm (сайт1.ru/razdel/stranica.htm).
Проиндексируется ли страница stranica.htm, если на нее установить ссылку на каком-нибудь другом сайте, отличном от сайт1.ru?
Спасибо
Нет, не проиндексирует при наличии сылок с любого сайта
Нет, не проиндексирует при наличии сылок с любого сайта
Благодарю за ответ. Т.е. поисковый робот получается "выходит" не на саму страницу, а последовательно проходит путь с главной страницы до внутренних. или сразу же анализирует содержимое robots.txt и действует соответствующим образом?
А вот в ситуации, если все разделы сайта разрешены к индексации, но на его внуреннюю страницу stranica.htm нет ни одной ссылки с других страниц этого сайта, проиндексируется ли она, если на нее будет установлена доступная для роботов ссылка на другом сайте?
Спасибо
Немного теории:
Страницу можно закрыть от индексации двумя общеизвестными способами:
- через файл robots.txt: как правило, это запрет индексации целого каталога или ряда страниц (начинающихся с указанных префиксов).
- прописав в <head> ... </head>: <meta name="robots" content="noindex, nofollow">: запрещается индексация конкретной страницы.
Соответственно бот индексирует все страницы, что не запрещены к индексации (в том числе и найденные по ссылкам с других сайтов).
Немного теории:
Страницу можно закрыть от индексации двумя общеизвестными способами:
- через файл robots.txt
- прописав в <head> ... <meta name="robots" content="noindex, nofollow"></head>
Соответственно бот индексирует все страницы, что не запрещены к индексации (в том числе и найденные по ссылкам с других сайтов).
Спасибо за полный ответ )
она запрещена будет...конечно же нет. Она просто не будет индексироваться поисковиком.
Смотрите форум.Темы подобного рода уже создавались.
или сразу же анализирует содержимое robots.txt и действует соответствующим образом?
вот именно так :)