CMS для миллиардов страниц

кеш на разные сервера и nginx как лоад балансер перед ними

Поисковики типичному проекту жизненно необходимы.

То, что проект не способен с ними справится не повод вести себя подобно страусу.

Вангую за explain и расстановку корректно индексов, ибо хоть 100 млрд. страниц, при правильных индексах все работает молниеносно. А еще убрать запросы с циклов и использовать limit нормально

Я говорю не обо всех файлах, а о тех, которыми можно пожертвовать, опять же, в зависимости от специфики проекта.