У меня было примерно так — когда фильтры слишком жесткие, сервер реально подгибает, лучше оставить только самое важное, остальное на стороне наружного оборудования или облака. Еще попробуй кеширование включить, это реально помогает разгрузить ЦП на пике.