[Blast]

На сервере кроме сервера что-то есть? Например опера/фаерфокс;-)

Что в логах во время зависания?
Вообще кол-во озу достаточно что бы был лааааааг.

Запустите системный монитор, посмотрите на какой винт записывается/читается в это время, или же в файр подкачки обращение идёт - наверно тут и решиться в чём проблема.