тоесть если скрыто /page/ и никаких карт итд нету то он не сможет найти новости(/news/)?
На новости у меня можно переходить только через /page/
Просто не совсем понял)
может кто написать что получится в результате если я сделаю вот так:
существует каталог site.ru/qwerty/ в нем лежат ссылки на site.ru/user/ (к папке user можно попасть только через папку qwerty никаких карт итд нету).
Если я заблокирую яше доступ к /qwerty/ он проиндексирует ссылки site.ru/user/ или нет?
А если ко мне на сайт пришел быстробот но сайт в индексе не появился после него это норм?
(просто обычно после быстробота дня через три в индекс входят странички)
что за дроп?
домен свежереганный был
проверил добавилось
и еще 1 вопрос.
Месяц назад добавил в сапу сайт.
Пришел бот YandexBot/3.0; .
Удалил ссылку из сапы.
Прошел месяц сайты в индексе нету
и бана тоже.
почему не проиндексировался?
