- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
САБЖ.
Я первый раз озадачился этим. Мне надо чтобы сайт индексировался полностью,и чтобы он индексировался по адресу http://www.zarabotai.nm.ru ,а не http://zarabotai.nm.ru
Текст я такой сделал:
User-Agent: *
Disallow:
Host: www.zarabotai.nm.ru
Все правильно или надо чтото еще добавить/исправить?
правильно, если только для яндекса
Именно для него. Другие поисковики вроде нормально индексируют, хотя я конкретно не смотрел.
А если под всех надо будет, то что еще дописать?
И вопрос еще: этот файл(robots.txt) надо просто закачать в корневую директорию?
* - это не Яндекс, это все.
И вопрос еще: этот файл(robots.txt) надо просто закачать в корневую директорию?
да
Kost, с директивой Host секция игнорируется другими поисковиками, Гуглем точно
с директивой Host секция игнорируется другими поисковиками, Гуглем точно
Рамблер пропускает
Если я не ошибаюсь, то бесплатные домены 3-го уровня с www. не индексятся в Янд.
Точно, вот цитата:
Адрес h**p://www.zarabotai.nm.ru/best.htm может быть внесен в нашу базу данных (и, соответственно, проиндексирован) по адресу h**p://zarabotai.nm.ru/best.htm. Добавить.
Гм, т.е. Вы хотите сказать,что этот роботс.тхт не поможет? Только не это! Это значит я зря все это время ставил столько ссылок на адрес с www!? У меня ей-богу руки опускаются, как подумаю, что все надо делать заново...
Яндекс не индексит такие сайты с приставкой www.
Сами посмотрите.. Возьмите одну ссылку своего сайта и добавьте её в индексацию Яндекса.
Да я то это видел.
Но он же пишет,что
и посылает читать ФАК по зеркалам. Там написано,что директивой "host" можно дело поправить,указав основное зеркало(т.е. с www). Или все равно не проиндексит как надо?
Может в суппорт написать?