- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Проиндексируют ли поисковики новый каталог на сервере, если на него нет ни одной ссылки со страниц сайта(этот каталог - подобие дорвея), но данный каталог НЕ запрещен к индексации в роботс.тхт?(например завел на сайте сайт.ру каталог ляля и получилось сайт.ру/ляля) Или же этот каталог надо регить в CE?
Роботы ходят по ссылкам, а не по файловой структуре сервера, поэтому, если Вы не установите на новые страницы ссылки с уже проиндексированных или не засабмитите новые страницы вручную, поисковики не узнают об этом новом каталоге.
Хорошо, тогда немножко дополню вопрос. Если я укажу к идексации каталог ццц.ффф.ру/тт то он проиндексирует лежащие в нем файлы, если они не ссылаются друг на друга ? или проиндексируется только индекс.хтм(л) страница? А если индекса не будет, что тогда проиндексируется ?
Avatar, подумайте сами, вы сообщаете роботу о новой странице, он ее ест. Потом смотрит, какие на ней ссылки, ставит эти страницы в очередь. Через какое-то время их тоже ест. Робот - это тот же HTTP-клиент, что и броузер, только без наворотов, текстовый.
Если в директорию вы не положили файл index.html, результат зависит от настройки веб-сервера. Посмотрите броузером, зачем гадать на кофейной гуще.
Если не положить индекс в каталог, то Яндекс видит это как страницу со ссылками на документы, которые в каталоге лежат. Если там лежат html-документы, он проиндексирует и их.
Если в конфига Апача не указано для этой директории
Options Indexes
то кроме 403 там ничего не увидите. По умолчанию в Апаче именно так, из соображений безопасности.
P.S. 2moderators: Перенести бы эту ветку в форум для начинающих.