Начинайте с материнки.
Далее системный блок (если в старый не влезает) и процессор.
Если будет хорошая "база" - дальнейшая модернзация компьютера сведется преимущественно к докупанию новых коплектующих, а не к их замене, то есть меньше зря потраченных денег.