Куплю дропы по тематике криптовалюта/финансы рассмотрю все предложения по всем бюджетам
Нужно очень много, потому буду рад всем откликам
Пишите в телегу - sam3d
В приоритете бурж с хорошим ссылочным
Все настроено. Боты шарахаются по сайту от 3 минут до 22,5 часов
Много памяти уходит на сам PHP и не все получается хранить в озу.
Нужно хранить часть в кэше озу и часть на диске
Я спрашивал про движок, потому что возможно я не смог найти готовое решение, которое жрет мало ресурсов и имеет все функции для грамотного кэширования
Сайт не один, их много, потому роботы сканируют достаточно много страниц. А на сам человеческий трафик остается не так много ресурсов. Сайтмапы есть и мне важно держать максимальное количество страниц в индексе.
Кеширование настроено и этого недостаточно. Все ненужные роботы в бане
Пардон, никак не ожидал что кто-то ответит.
Спасибо за дельные советы danforth , MrLexKo, DiKiJ
Ботов банили, крол дилэй и вправду не работает.
В вебмастера такие сайты добавлять рискованно.
Сервера вот такие в основном - https://hetzner.com/hosting/produkte_rootserver/ex41/
Миллиарды страниц - парсинг + генерация
Кеширование конечно же реализовано.
Вопрос был про движки, которые при наличии миллиардов страниц не будут грузить сервер и как уменьшать нагрузку от роботов пс
Посоветуйте партнерку с хорошими готовыми тизерами для поискового ру трафа?
Тематики следующие:
Авто
Сериалы, кино
Свадьба
Мамочки
Путешествия и страны
Кулинария
Любовь
Мультики
и еще куча всего, устану писать.
вот так выглядит htaccess
с проблемой так и не справился. кто поможет?
в итоге проиндексировался сегодня.
убрал редирект с домена на домен с www
видимо он и мешал индексации.
всем спасибо!
