toxa,
То есть при запрете для индексирования запрещается не только "вхождение" в папку напрямую, но и по ссылкам с других страниц ?
А где можно подробно, но доступно прочитать про mod rewrite, с конкретными примерами его использования ?
Вот пример моего файла index.php
<?php $sectiontitle = "Название раздела"; $title = "Заголовок статьи"; $description = "Описание содержания"; $keywords = "Все ключевые слова"; $file = "includes/articletext.txt"; $submenu = "includes/submenu1.html"; include ("includes/header.html"); include ("includes/content.html"); ?>
В файлы header и content подставляются (куда нужно) переменные сверху. В header же прилинкован css файл, который оформляет всю страницу.
Если я правильно понимаю, то веб-поисковики будут кэшировать не содержимое моего index.php файла, а как бы "откроют его" и сделают ссылку на уже готовую страницу index.php, полностью оформленную? А содержимое папки includes где лежат всякие куски - просто проигнорируют?
Есть ли подобные поисковики "по сайту"?