- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Добрый день,
прошу совета!
Вот уже с середины декабря не могу добиться индексации сайта http://www.servotechnica.ru как основного.
Директива Host в robots.txt прописана.
Все зеркала запрещены к индексации.
Но при добавлении в форму Яндекса www.servotechnica.ru выдается соообщение:
"Адрес www.servotechnica.ru может быть внесен в нашу базу данных (и, соответственно, проиндексирован) по адресу http://www.servotechnika.ru/. Добавить.
Добавленный вами сайт не индексируется, так как является «зеркалом» http://www.servotechnika.ru/. Подробнее о сайтах-зеркалах вы можете прочитать в FAQ."
Причем www.servotechnika.ru уже в базе Яндекса не присутсвует...
Не знаю уже, что и делать :(
header ("HTTP1/1 302");
header ("Location: http://www.servotechnica.ru$_SERVER['SCRIPT_FILENAME']");
А почитать ФАК не пробовал для начала?:)
Bomass, тогда уж HTTP/1.1 301 Moved permanently :)
marat, что-то robots.txt у вас пустой?
Bomass, тогда уж HTTP/1.1 301 Moved permanently :)
marat, что-то robots.txt у вас пустой?
Да. На servotechnica.ru - пустой.
А здесь http://www.servotechnika.ru/robots.txt, такой:
User-Agent: *
Disallow: /
Host: www.servotechnica.ru
Что-то неверно?
header ("HTTP1/1 302");
header ("Location: http://www.servotechnica.ru$_SERVER['SCRIPT_FILENAME']");
На сайте прописано так:
if ( strpos($_SERVER["HTTP_HOST"],"servotechnics.ru") !== false || strpos($_SERVER["HTTP_HOST"],"servotechnika.ru") !== false)
{
header('Location: http://www.servotechnica.ru' . $_SERVER["REQUEST_URI"]);
exit;
}
marat, директива Disallow: / запрещает индексацию всего сайта.
/отредактировано/
Упс. Невнимательно прочитал. Яндекс сейчас считает основным зеркалом
http://www.servotechnika.ru/, который запрещен к индексации в robots.txt.
Пишите в саппорт. Я бы еще снял запрет индексации и поставил бы 301 редирект с http://www.servotechnika.ru/ на http://www.servotechnica.ru/
Смотрим http://www.servotechnika.ru/robots.txt
User-Agent: * Disallow: / Host: www.servotechnica.ru
У вас сервер считает .txt файл за .html, поэтому все выдается в одну строчку, см. заголовки:
HTTP/1.0 200 OK
Server: nginx/0.1.45
Date: Tue, 24 Jan 2006 12:46:16 GMT
Content-Type: text/html; charset=windows-1251
Expires: Thu, 01 Jan 1970 00:00:01 GMT
Last-Modified: Tue, 24 Jan 2006 12:46:16 GMT
Connection: close
А должно быть text/plain. Настройте сервер.
Смотрим http://www.servotechnika.ru/robots.txt
User-Agent: * Disallow: / Host: www.servotechnica.ru
У вас сервер считает .txt файл за .html, поэтому все выдается в одну строчку, см. заголовки:
Content-Type: text/html; charset=windows-1251
А должно быть text/plain. Настройте сервер.
Понял, обращаюсь в саппорт хостинга.
НО - думаю, это никак не влияет на реакцию бота - так как проверял эту версию robots.txt вот с помощью этого скрипта
http://www.yandex.ru/cgi-bin/test-robots
Все нормально. Сайт запрещен для индексации.
marat, директива Disallow: / запрещает индексацию всего сайта.
/отредактировано/
Упс. Невнимательно прочитал. Яндекс сейчас считает основным зеркалом
http://www.servotechnika.ru/, который запрещен к индексации в robots.txt.
Пишите в саппорт. Я бы еще снял запрет индексации и поставил бы 301 редирект с http://www.servotechnika.ru/ на http://www.servotechnica.ru/
В саппорт писал неоднократно.
Отвечают примерно вот так:
---
Здравствуйте, Марат!
Через неделю должен добавиться сайт www.servotechnica.ru в форму.
---
Но неделя проходит за неделей...
парочка в роботсе
User-Agent: *
Disallow: /
действительно запрещает ВСЕМ поисковым сайтам индексацию ВСЕГО сайта (уберите /). Следующая за ними директива Host лишь говорит ВСЕМ поисковикам, что основным зеркалом является ВВВ....
Тем не менее надо попинать САППОРТ ХОСТЕРА, чтобы для роботс.тхт выдавался MIME-type text/plain
следующая директива Host лишь говорит ВСЕМ поисковикам, что основным зеркалом является ВВВ....
Только Яндексу она говорит...
Нет, говорит всем, это понимает ее только Яндекс :)