- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Вот недавно решил помочь поисковикам проиндексировать сайт избавив от индексирования сайта с ненужным текстом.
Суть вопроса такова:
есть три файла index.php
show.php
info.php
Причем структура такова
index.php
|
show.php
/ | \
info?1 info?2 info.php?3
Вопрос, если я сделаю disallow: /show.php
будет ли индексировать Яндекс и ко, важные информационные страницы info.php?xxx
P.S. И какова максимальная возможность индексирования этих динамических страниц info.php?xxx. Их больше 12 тысяч а индексируются дай бог только 3000?
С чего бы это вдруг.
будет ли индексировать Яндекс и ко, важные информационные страницы info.php?xxx
А как робот найдет ссылки на ваши info.php?xxx?
Если найдет ссылки на страницах, отличных от show.php, то будет индексировать.
Ограничено кол-во страниц, которое робот берет за один заход.
😎
Если найдет ссылки на страницах, отличных от show.php, то будет индексировать.
Не все роботы принимают файл robots, как руководство к действию. Вполне реальна ситуация, что ссылки каким-либо образом всплывают ниоткуда (объяснение конечно находятся, но от этого не легче). Я же предпочитаю подменять скрипты на то время, которое мне необходимо и не париться :)
Ограничение по количеству само собой есть, но и не всю динамику индексирует rambler, даже за несколько проходов. Кстати есть ограничения и у Яндекса.
Кстати есть ограничения и у Яндекса.
Об этом подробнее можно? Какие ограничения?
Если честно, то я затрудняюсь ответить на этот вопрос :) Есть предположения и постоянные испытания :)
Точно могу сказать, что:
1. Чем больше документов, тем дольше будет проходить индексация
2. В любом случае нужно стремиться к избавлению от ? и & (mod_rewrite например)
3. И насколько я понимаю, у всех SE есть ограничени на очень большое количество страниц
Но о последнем хотелось бы спросить у более опытных людей :)
Тогда так и говорите, что Вам кажется, что есть ограничения и у Яндекса
Если честно, то я затрудняюсь ответить на этот вопрос :) Есть предположения и постоянные испытания :)
У Яндекса только ограничения на количество страниц, которые робот забирает при очередном обходе. Во всяком случае у меня обычно это количество не превышает 400-450 страниц.
На общее количество страниц ресурса в индексе вроде ограничений нет.
(всё ИМХО)
да, но при слишком большом количестве обязательно прийдут, глазами посмотрят и ручками ограничат если надо
но если страниц не более 50к то наверное не станут ничего ограничивать
Вот вы говорите 20к, 50к.
Пожалуйста, приведите примеры ресурсов, на которых реально может быть такое количество страниц. Я ЧЕСТНО не знаю таких и не понимаю, кто и что там может размещать.
Пожалуйста, приведите примеры ресурсов, на которых реально может быть такое количество страниц.
N.B. Я знаю сайт, на котором в открытом доступе есть больше миллиона документов, хотя проиндексирована из них крохотная часть.
С уважением,
Александр Садовский.
Спасибо за ответ. Новостные ленты я предполагал. Но магазины.... это же фикция - не бывет столько товаров в наличии...