[Magnus_A]

Välkommen till VPS-landet, här kan man inte riktigt vara säker på varför saker fungerar eller inte. Man får pröva sig fram.
Att apache drar så mycket verkar ovanligt. Normalt är det mysql som grisar i sig . Är InnoDB avslaget?
perl som krävs av Spamassassin är också bra på att konsumera minne. Ett alternativ är Bogofilter, mindre krävande.
Sist men inte minst så kan Postfix ta för sig av tcp-connections så att de inte räcker till.