- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу

В 2023 году Одноклассники пресекли более 9 млн подозрительных входов в учетные записи
И выявили более 7 млн подозрительных пользователей
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Закрыл индексацию на сайте, потому что сервер не справлялся. Когда вернуться боты поисковые, чтобы заного попробовать проиндексировать? Или это надо как-то вручную уже будет заявление делать.
Закрыл индексацию на сайте
Как именно закрыли?
Попробуйте эту директиву и откройте индексацию обратно.
User-agent: *
Disallow: /
Боюсь, что боты придут не скоро =(
Я вам написал, что надо сделать. Почему вы не читаете? Или читаете, но не понимаете слов?
Вы не можете запретить доступ к файлу robots.txt, роботы за ним регулярно приходят. Если в нем будут изменения, они это увидят.
А чтобы не сидеть как болван, который ничего не видит и не знает, что именно делают роботы, почитайте ссылку, которую я вам дал и почитайте логи вашего сайта.
они придут и попросту увидят что сайт закрыт от индексации... со временем сайт может полностью выйти из индекса так как вы запрещаете его индексировать... вручную делается через аддурилку яндекса... но лучше не допускать подобного... смените сервер наконец
User-agent: *
Disallow: /admin/
Disallow: /profile
User-agent: Yandex
Crawl-delay: 10
User-agent: msnbot
Crawl-Delay: 25
User-agent: googlebot
crawl-delay: 10
User-agent: yahoo-slurp
Crawl-Delay: 15
User-agent: Mail.Ru
Crawl-Delay: 20
Правильно?
Да, нормально. Но уж очень большие интервалы, ИМХО.
Посмотрите по логам, какие боты больше всего мучали ваш сайт.
И думайте, почему не справляется хостинг - криво сделан сайт или фиговый хостинг.
Был, хреновый движок. Каждый раз когда бот запрашивал сайт ему выдавалась новая сессия, в итоге сессий было слишком много и нельзя было создать новую сессию.
Каждый раз когда бот запрашивал сайт ему выдавалась новая сессия
Ну и закройте эти урлы в robots.txt , доработайте движок.