не ясности с файлом robots.txt

S2
На сайте с 12.06.2011
Offline
126
762

мой файл robots.txt (указано только код зеркала)

User-agent: Yandex

Disallow:

Host: wwww.zabegaite.ru

недавно сделал редирект в файле .htaccess

Options +FollowSymLinks

RewriteEngine On

RewriteCond %{HTTP_HOST} ^zabegaite.ru

RewriteRule ^(.*)$ http://www.zabegaite.ru/$1 [R=301,L]

При анализе robots.txt в вебмастере (яндекс) он сообщает,что

Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление.

подскажите как зделать все правильно.

K
На сайте с 30.08.2011
Offline
47
#1
sotex2:
Host: wwww.zabegaite.ru

сильно 😂

L
На сайте с 27.11.2012
Offline
15
#2

RewriteEngine On

RewriteCond %{HTTP_HOST} ^zabegaite.ru

RewriteRule ^(.*)$ http://www.zabegaite.ru/$1 [R=permanent,L]

у меня так все работает

S2
На сайте с 12.06.2011
Offline
126
#3

спасибо за намек, исправил. но все ровно он сообщает,что

Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление.

---------- Добавлено 27.11.2012 в 16:22 ----------

kruchen:
сильно 😂

спасибо за намек, исправил. но все ровно он сообщает,что

Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление.

L
На сайте с 27.11.2012
Offline
15
#4

значит ищи в другом месте проблему, если используешь CMS там смотри, покажи весь .htaccess там есть еще редиректы

S2
На сайте с 12.06.2011
Offline
126
#5
Lonit:
значит ищи в другом месте проблему, если используешь CMS там смотри, покажи весь .htaccess там есть еще редиректы

вот мой .htaccess

ErrorDocument 404 /error404.htm

AddType application/x-httpd-php .html .htm

DirectoryIndex index.php

Options +FollowSymLinks

RewriteEngine On

RewriteCond %{HTTP_HOST} ^zabegaite.ru

RewriteRule ^(.*)$ http://www.zabegaite.ru/$1 [R=301,L]

RewriteRule ^donate index.php?do=donate [L]

# Редиректы

RewriteRule ^([0-9]+)(/?)+$ index.php?cstart=$1 [L]

# Сам пост

RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/page,([0-9]+),([0-9]+),(.*).html(/?)+$ index.php?subaction=showfull&year=$1&month=$2&day=$3&news_page=$4&cstart=$5&news_name=$6 [L]

RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/page,([0-9]+),(.*).html(/?)+$ index.php?subaction=showfull&year=$1&month=$2&day=$3&news_page=$4&news_name=$5 [L]

RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/print:page,([0-9]+),(.*).html(/?)+$ engine/print.php?subaction=showfull&year=$1&month=$2&day=$3&news_page=$4&news_name=$5 [L]

RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/(.*).html(/?)+$ index.php?subaction=showfull&year=$1&month=$2&day=$3&news_name=$4 [L]

#нумерация коментариев в новости

rewriterule ^([^.]+)/comm([0-9]+)_([0-9])-(.*).html(/?)+$ index.php?newsid=$3&cstart=$2&seourl=$3&seocat=$1 [l]

rewriterule ^([^.]+)/comm([0-9]+)_(.*).html(/?)+$ index.php?news_name=$3&cstart=$2&seourl=$4&seocat=$1 [l]

#нумерация в новости

RewriteRule ^([^.]+)/page([0-9]+)_([0-9]+)-(.*).html(/?)+$ index.php?newsid=$3&news_page=$2&seourl=$3&seocat=$1 [L]

RewriteRule ^([^.]+)/page([0-9]+)_(.*).html(/?)+$ index.php?news_name=$3&news_page=$2&seourl=$3&seocat=$1 [L]

RewriteRule ^([^.]+)/print:page,([0-9]+),([0-9]+)-(.*).html(/?)+$ engine/print.php?news_page=$2&newsid=$3&seourl=$4&seocat=$1 [L]

RewriteRule ^([^.]+)/print:page,([0-9]+),(.*).html(/?)+$ engine/print.php?news_page=$2&news_name=$3&seourl=$4&seocat=$1 [L]

#Вывод полной новости из категорией

RewriteRule ^([^.]+)/([0-9]+)-(.*).html(/?)+$ index.php?newsid=$2&seourl=$2&seocat=$1 [L]

RewriteRule ^([^.]+)/(.*).html(/?)+$ index.php?news_name=$2&seourl=$2&seocat=$1 [L]

RewriteRule ^page([0-9]+)_([0-9]+)-(.*).html(/?)+$ index.php?newsid=$2&news_page=$1&seourl=$2 [L]

RewriteRule ^page([0-9]+)_(.*).html(/?)+$ index.php?news_name=$2&news_page=$1&seourl=$2 [L]

RewriteRule ^comm([0-9]+)_([0-9]+)-(.*).html(/?)+$ index.php?newsid=$2&cstart=$1&seourl=$2 [L]

RewriteRule ^comm([0-9]+)_(.*).html(/?)+$ index.php?news_name=$2&cstart=$1&seourl=$2 [L]

RewriteRule ^print:page,([0-9]+),([0-9]+)-(.*).html(/?)+$ engine/print.php?news_page=$1&newsid=$2&seourl=$3 [L]

RewriteRule ^print:page,([0-9]+),(.*).html(/?)+$ engine/print.php?news_page=$1&news_name=$2&seourl=$3 [L]

# За день

RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})(/?)+$ index.php?year=$1&month=$2&day=$3 [L]

RewriteRule ^([0-9]{4})/([0-9]{2})/([0-9]{2})/page/([0-9]+)(/?)+$ index.php?year=$1&month=$2&day=$3&cstart=$4 [L]

# За весь месяц

RewriteRule ^([0-9]{4})/([0-9]{2})(/?)+$ index.php?year=$1&month=$2 [L]

RewriteRule ^([0-9]{4})/([0-9]{2})/page/([0-9]+)(/?)+$ index.php?year=$1&month=$2&cstart=$3 [L]

# Вывод за весь год

RewriteRule ^([0-9]{4})(/?)+$ index.php?year=$1 [L]

RewriteRule ^([0-9]{4})/page/([0-9]+)(/?)+$ index.php?year=$1&cstart=$2 [L]

# вывод отдельному тегу

RewriteRule ^tags/([^/]*)(/?)+$ index.php?do=tags&tag=$1 [L]

RewriteRule ^tags/([^/]*)/page/([0-9]+)(/?)+$ index.php?do=tags&tag=$1&cstart=$2 [L]

# вывод для отдельного юзера

RewriteRule ^user/([^/]*)/rss.xml$ engine/rss.php?subaction=allnews&user=$1 [L]

RewriteRule ^user/([^/]*)(/?)+$ index.php?subaction=userinfo&user=$1 [L]

RewriteRule ^user/([^/]*)/page/([0-9]+)(/?)+$ index.php?subaction=userinfo&user=$1&cstart=$2 [L]

RewriteRule ^user/([^/]*)/news(/?)+$ index.php?subaction=allnews&user=$1 [L]

RewriteRule ^user/([^/]*)/news/page/([0-9]+)(/?)+$ index.php?subaction=allnews&user=$1&cstart=$2 [L]

RewriteRule ^user/([^/]*)/news/rss.xml(/?)+$ engine/rss.php?subaction=allnews&user=$1 [L]

# вывод всех последних новостей

RewriteRule ^lastnews/(/?)+$ index.php?do=lastnews [L]

RewriteRule ^lastnews/page/([0-9]+)(/?)+$ index.php?do=lastnews&cstart=$1 [L]

# вывод в виде каталога

RewriteRule ^catalog/([^/]*)/rss.xml$ engine/rss.php?catalog=$1 [L]

RewriteRule ^catalog/([^/]*)(/?)+$ index.php?catalog=$1 [L]

RewriteRule ^catalog/([^/]*)/page/([0-9]+)(/?)+$ index.php?catalog=$1&cstart=$2 [L]

# вывод непрочитанных статей

RewriteRule ^newposts(/?)+$ index.php?subaction=newposts [L]

RewriteRule ^newposts/page/([0-9]+)(/?)+$ index.php?subaction=newposts&cstart=$1 [L]

# вывод избранных статей

RewriteRule ^favorites(/?)+$ index.php?do=favorites [L]

RewriteRule ^favorites/page/([0-9]+)(/?)+$ index.php?do=favorites&cstart=$1 [L]

RewriteRule ^rules.html$ index.php?do=rules [L]

RewriteRule ^statistics.html$ index.php?do=stats [L]

RewriteRule ^addnews.html$ index.php?do=addnews [L]

RewriteRule ^rss.xml$ engine/rss.php [L]

RewriteRule ^sitemap.xml$ uploads/sitemap.xml [L]

RewriteCond %{REQUEST_FILENAME} !-d

#Вывод категории

RewriteRule ^([^.]+)/([0-9]+)(/?)+$ index.php?do=cat&category=$1&cstart=$2 [L]

RewriteRule ^([^.]+)/?$ index.php?do=cat&category=$1 [L]

RewriteCond %{REQUEST_FILENAME} !-f

RewriteRule ^([^.]+)/rss.xml$ engine/rss.php?do=cat&category=$1 [L]

RewriteRule ^page,([0-9]+),([^/]+).html$ index.php?do=static&page=$2&news_page=$1 [L]

RewriteRule ^print:([^/]+).html$ engine/print.php?do=static&page=$1 [L]

RewriteCond %{REQUEST_FILENAME} !-f

#статическая страница

# без HTML RewriteRule ^([^.]+)$ index.php?do=static&page=$1 [L]

RewriteRule ^([^/]+).htm$ index.php?do=static&page=$1 [L]

#Вывод новости в не категории с ID и без

RewriteRule ^([0-9]+)-(.*).html(/?)+$ index.php?newsid=$1&seourl=$1 [L]

RewriteRule ^(.*).html(/?)+$ index.php?news_name=$1&seourl=$1 [L]

#Включаем отслеживание сим-ссылок

Options +FollowSymLinks

#Запускаем url_rewriting

RewriteEngine On

#Блокируем все ссылки, содержащие <script>

RewriteCond %{QUERY_STRING} (\<|%3C).*script.*(\>|%3E) [NC,OR]

#Блокируем все скрипты, которые пытаются изменить переменные PHP Globals:

RewriteCond %{QUERY_STRING} GLOBALS(=|\[|\%[0-9A-Z]{0,2}) [OR]

#Блокируем все скрипты, которые пытаются изменить переменную _REQUEST:

RewriteCond %{QUERY_STRING} _REQUEST(=|\[|\%[0-9A-Z]{0,2})

#Перенаправляем все подобные на страницу с ошибкой 403 - запрещено

RewriteRule ^(.*)$ index.php [F,L]

---------- Добавлено 27.11.2012 в 17:22 ----------

всем спасибо, исправил

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий