Файл robots.txt некорректно загружается в Яндекс вебмастер панели

02rus
На сайте с 30.05.2012
Offline
39
1632

Пришлось столкнуться с такой проблемой. В панели Яндекс Вебмастера проверяю файл robots.txt путем указания пути к нему site.ru/robots.txt и жму кнопку загрузить файл с сайта. В окошке ниже появляются строчки с файла но, первая строчка выглядит не так как в файле, появляются посторонние символы и соответственно выходят ошибки

User-agent: *                                                                           

Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag/

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /tag/

В файле прописано

User-agent: *

В панели пишется

1: User-agent: *

Обнаружена неизвестная директива
2: Disallow: /wp-login.php
Перед правилом нет директивы User-agent

Подскажите что неправильно делаю?

Позаимствовав идею российского Яndex и его слогана: “Яndex. Найдется всё”, PR-работники Yahoo разработали свой слоган для русскоговорящей аудитории - “Yahoo его знает”….
S4
На сайте с 26.09.2009
Offline
80
#1

Кодировка, utf8, отконвертить файл надо заново либо в кодировку вин1251

02rus
На сайте с 30.05.2012
Offline
39
#2
swimer42:
Кодировка, utf8, отконвертить файл надо заново либо в кодировку вин1251

Благодарю за ответ! Конвертация из utf 8 в utf 8 без (BOM ) решила проблему.

---------- Добавлено 20.09.2013 в 15:21 ----------

И мне интересно, могла ли данная причина быть следствием игнора моих сайтов поисковой системой Яндекса?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий