- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу

Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева

В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте!
Если я закрою определенную страницу в файле robots.txt, она не будет индексироваться Яндексом и Гуглом, или все-же будет?
Не будет.
http://help.yandex.ru/webmaster/?id=996567
Здравствуйте!
Если я закрою определенную страницу в файле robots.txt, она не будет индексироваться Яндексом и Гуглом, или все-же будет?
По крайней мере в индексе этой страницы быть не должно.
Хорошо, еще вопрос.
У меня все файлы которые надо закрыть находятся в папке.
Надо просто закрыть папку
Disallow: /папка
или закрывать каждый файл?
Disallow: /папка/файл.php
Disallow: /папка
Запрет на все страницы, начинающиеся на /папка.
Спасибо за помощь!
---------- Добавлено 20.09.2012 в 13:28 ----------
Еще вопрос.
У меня ссылки на эти страницы которые я хочу закрыть стоят на странице. На этой странице их заключать в noindex или они и так не будут проиндексированы и Яндекс не сможет на них попасть и прочитать их?
Гуглом будет индексироватся если на страницу ссылаются, без снипета и сохраненной копии, более подробно почитать можно тут http://support.google.com/webmasters/bin/answer.py?hl=ru&answer=156449
Хотя Google не сканирует и не индексирует содержание страниц, заблокированных в файле robots.txt, URL, обнаруженные на других страницах в Интернете, по-прежнему могут добавляться в индекс. В результате URL страницы, а также другие общедоступные сведения, например текст ссылок на сайт или заголовок из каталога Open Directory Project (www.dmoz.org), могут появиться в результатах поиска Google.
Гуглом будет индексироватся если на страницу ссылаются, без снипета и сохраненной копии, более подробно почитать можно тут http://support.google.com/webmasters/bin/answer.py?hl=ru&answer=156449
А Яндексом?
А Яндексом?
Яндексом не наблюдал подобное, не индексирует.
Хотя Google не сканирует и не индексирует содержание страниц, заблокированных в файле robots.txt
Я вот экспериментом подтвердил обратное. Страница запрещена, на ней стоит ссылка, робот по ней ходит и цель ссылки в индексе, хотя других ссылок на нее нет. Так что не сильно то им верьте.