Очень странно, если честно. В коммьюнити все правильно пишут: кушает 90-120 мб. У меня в полностью аналогичной конфинурации (тот же DigitalOcean, та же убнта и пр) на одном пятидолларовом инстнсе бежит две инсталляции Ghost.
Возможно проблема не в x32/x64, а в где-то конкретно в этой инсталляции.