Mache zuerst mal ein
Upgrade auf die aktuelle Version 2.5.1. Dann wird der Blog wahrscheinlich schon schneller laufen.
Dann kannst Du immer noch den Cache einschalten, wenn sich nichts tun sollte.
Und zur Frage mit dem Cache:
Function Reference/WP Cache « WordPress Codex