- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Добрый день,
Ведем в интернете 3 сайта. Число страниц приближается к 50 тысячам (база по хим. реактивам и хим. соединениям). Нам важно, чтобы сайт хорошо индексировался.
Но вот время от времени приходит робот Яндекса и заваливает сайт. У нас не выделенный сервер (институт бюджетный, бедный, может разориться только на виртуальный хостинг). Провайдер грозится выгнать с хостинга, так как нагрузка уж очень большая на базу MySQL.
SQL - запросы самые оптимизированные-переоптимизированные.
Поделитесь, как вы выходите из такой ситуации. Временно поставили в .htaccess инструкцию:
deny from 213.180.216.6
deny from 87.250.244.17
но это, конечно, не решение.
Указаны IP адреса машин яндекса, с которых приходит нагрузка. Первая называется sfront35.yandex.ru
Может быть сотрудники яндекса читают этот форум и также могут посоветовать что-либо.
generalbox, решений море. Главное - разобраться, почему Яндекс постоянно переиндексирует ваши страницы. Наверняка они у вас неизменны :) Разберитесь с серверными заголовками.
Запрещать доступ робота к сайту проще делать в robots.txt :)
читают но врядли ответят. ИМХО.
а уж без этого ни как. хороший хостинг залог успеха. :)
generalbox, у вас битрикс?
1. Проверить код и найти что грузит сервер
2. Запретить к индексации ненужные страницы
3. Сменить хостера
Имеется аналогичная проблема. Гугл гораздо больше страниц индексирует, и без вреда работает, а Яша обязательно базу валит. Когда он не был в исключениях системы блокировки флуда с айпи, он неизменно залетал в бан. Сейчас он в исключениях, инеизменновалит сайт :)
Правда на данный момент, море вариантов я не вижу, кроме как перевести сайт на более мощный сервер или яшу обратно в бан отправить :)
Каширин, а как объяснить яндексу какие страницы по десятому разу индексировать не надо?
Быть может, действительно глючный скрипт. Но, скорее всего, вы сэкономили на хостере.
как объяснить яндексу какие страницы по десятому разу индексировать не надо?
Изучаем метатеги.
Изучаем метатеги.
А разве яндекс те метатеги учитывает?
А разве яндекс те метатеги учитывает?
Для всех кроме Яндекса метатеги. Яндексу: last-modified
Для всех кроме Яндекса метатеги. Яндексу: last-modified
А также, и даже лучше, If-Modified-Since , только его надо правильно настроить для PHP.