- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
joost, получается так.
User-agent: Yandex
Disallow:
Host: www.site_url.ru
User-agent: *
Disallow:
+ в Disallow можно добавить те дерективы сайта которые хочешь, чтобы они не индексились роботами.
ePRom, именно
FlyAway, скажите это верно для вновь созданного сайта, чтобы сразу расставить точки над И , а как для не новых ресурсов неправильно опредленных яндексом так же поступить?
Дело в том что тут и меня беда постигла нежданно :(
Еще в июле все нормально было сайт в индексе находился как и было спланированно изначално http://site.ru, на сайте все ссылки правильные и 99% беков тоже в таком виде.
И вот захожу недавно проверить индекс и наблюдаю что абсолютно все по какому то дикому шаманству стало с приставкой www, Тиц на site.ru обнулился, взамен перешел на www.site.ru с небольшой потерей.
Написал в роботсе чтобы вернуть назад все - (полное содержание)
User-agent: *
Host: site.ru
Достаточно ли этого ?
FlyAway, скажите это верно для вновь созданного сайта, чтобы сразу расставить точки над И , а как для не новых ресурсов неправильно опредленных яндексом так же поступить?
Дело в том что тут и меня беда постигла нежданно :(
Еще в июле все нормально было сайт в индексе находился как и было спланированно изначално http://site.ru, на сайте все ссылки правильные и 99% беков тоже в таком виде.
И вот захожу недавно проверить индекс и наблюдаю что абсолютно все по какому то дикому шаманству стало с приставкой www, Тиц на site.ru обнулился, взамен перешел на www.site.ru с небольшой потерей.
Написал в роботсе чтобы вернуть назад все - (полное содержание)
User-agent: *
Host: site.ru
Достаточно ли этого ?
User-agent: Yandex
Disallow:
Host: site.ru
User-agent: *
Disallow:
ZeHer, в принципе достаточно. Но лучше писать так, как я писал выше.
ZeHer
Выложите лучше весь файл, если он длинее пяти строк.
Тут есть нюансы...
Принципиальный ответ - да, и еще внутренние ссылки на главную пропишите полностью http;//mysiti.ru/
Но если действительно все переехало, я бы на вашем месте спросил мнение Запридельщика.
FlyAway
Вижу, вы кое что понимаете.
А если так:
User-agent: *
Disallow:/fale/
Disallow:/fale2
User-agent: Google
Disallow:/
User-agent: Yandex
Disallow:/fale/
Disallow:/fale2
Host: www.site_url.ru
Секцию с полем Host: лучше писать в конце или Нужно писать в конце?
Собственно меня в этой записи смущает, что User-agent: * стоит в начале. Роботы дальше могут и не пойти.
А если так:
User-agent: Google
Disallow:/
User-agent: Yandex
Disallow:/fale/
Disallow:/fale2
Host: www.site_url.ru
User-agent: *
Disallow:/fale/
Disallow:/fale2
Роботы Google и Yandex последнюю секцию могут понять как последнюю дерективу для себя...
Впрочем если еще кто нибудь знает подробности о Google просьба показать примерчик с пояснением.
А для тех кто не вьехал - пропишите все ссылки полным путем.
Говорят, и поле Host: вписывать не придется.
А главное ошибок не будет!
User-agent: Googlebot
Disallow: /
User-agent: Yandex
Disallow: /fale/
Disallow: /fale2
Host: www.site_url.ru
User-agent: *
Disallow: /fale/
Disallow: /fale2
я бы сделал так ;)
Disallow:
Host: site.ru
User-agent: *
Disallow:
после Disallow: пробел нужен или нет?
где тут ставить пробелы?
после Disallow: пробел нужен или нет?
где тут ставить пробелы?
Вам нужно просто сделать Ctrl+C, потом Ctrl+V. Поменять название сайта и всё. :)
FlyAway, спасибо сделал как Вы писали.
Scmaks, это все содержимое было, боюсь туда лишнего натулить, да собственно и закрывать нечего.
Ссылки на сайте все стоят правильные изначально, по каталогам так же прогонял без приставки. К тому же, робот не сразу так решил, сайту пол года, в индексе был всегда только site.ru 6к страниц. Какого перца он решил что www главный, ума не приложу.
А кто такой Запридельщик? Простите я тут недавно.
Всем спасибо за консультации, буду ждать теперь, переклейки по новой.
Эх говорила мама, прописывай все сразу в роботс.тхт