- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Доброго всем!
Подскажите, плиз, можно ли как-то умерить аппетит Яндекса при индексации. Есть магазин на движке Zen-Cart, робот с двух айпишников задалбывает его запросами по несколько штук в секунду и так на протяжении нескольких дней подряд в любое время. Нагрузка на сервак немерянная и хостер грозит отключить.
Один раз отключили на день, так все 70 тыс. страниц тут же из поисковика выпали вместе с адресом и теперь та же байда началась по второму кругу. Однако страницы две недели уже как не появляются в выдаче.
Очень хотелось бы, чтобы поисковик учитывал интересы не только ищущих, но и владельцев ресурсов.
Технически через robots.txt можно хотя бы время индексации ограничить или увеличить интервал между запросами? Че делать-то вообще?
Технически через robot.txt можно хотя бы время индексации ограничить или увеличить интервал между запросами?
нельзя. в роботсе можно только запретить индексацию.
Че делать-то вообще?
ИМХО: Смените хостинг.
настраивать нормально сайт или не пользоваться дуратскими движками. неизменившиеся страницы должны отдавать 403. в худшем случае, движек должен кэшировать страницы. нехрена генерить их каждый раз.
настраивать нормально сайт или не пользоваться дуратскими движками. неизменившиеся страницы должны отдавать 403. в худшем случае, движек должен кэшировать страницы. нехрена генерить их каждый раз.
Только не 403 (Forbidden), а 304 (Not Modified). А так все правильно.
Не совсем понимаю.
Движок кэширует страницы, но они ж динамические, а значит изменяются. Как может сервер тогда выдавать 304?
Движок стандартный, товаров меньше тысячи, клон Os Commerce, по инету до дури таких магазинов стоит. Однако, сотня юзеров одновременно не создает такую загрузку, как один робот :(
Хостера смените и ни каких проблем не будет:)
Видно он слабоват... И если вы раскрутите магазин по полной у вас таже проблема будет.
З.Ы.: Увы но индексацию мы контралировать не можем. Только запрещать.
Хостер - Инфобокс, я с ним уже почти три года, не могу пожаловаться, что плох. Другие хостеры на загрузку не обращают внимания? :)
Может, тарифный план имеете в виду?
Может, тарифный план имеете в виду?
Не знаю может и из за него. Ну вообще я на Инфобокс такого не замечал.
Другие хостеры на загрузку не обращают внимания? :)
Обращают. У меня такая же проблема была на днях. Сайт выключили. Правда всего на час. Яндекс кроме главной ничего не индексировал, а тут его прорвало. Примерно такая же история. Тоже инет магазин. Движок vitrtuemart. Хостер - Прохостинг.
умерить аппетиты робота возможно правильной настройкой сервера - отдавать 304 код и last-modified. Можно перегонять часто меняющиеся страницы в статику, например главную. Генерировать такие переведенные в статику страницы можно допустим раз в сутки, или по необходимости. После перевода своего ресурса (одного на моем личном выделенном сервере) на такой принцип нагрузка ократилась в 5-ть раз.
Самое занятное в этом деле, что до недавнего времени магазин уже стоял 2 месяца и яндексом уже был проиндексирован, а тут он как с цепи сорвался - выкачал почти гигабайт за пару дней. У знакомых та же фигня - бюро знакомств завалил не так давно, оно работало почти год до того без проблем.