O ideal seria ter mais ram, com 16 gigas ou mais, vc pode até mesmo se arriscar a não ter uma Swap ou manter uma com valor bem pequeno como uns 500 megas, a questão do SSD vai depender do quanto essa swap será usada, vai com certeza colaborar para reduzir a vida útil, a questão é quanto, na minha empresa onde os computadores nunca são desligados, uma SSD com instalação padrão do linux (swap de 2 gigas), dura aproximadamente 2 anos antes de falharem, como são máquinas entre 4 e 8 gigas, a swap é bastante usada.