Não existe muito bem um consenso de quanto se deve usar de swap → Como trabalhar com "SWAP FILES" no Ubuntu - Diolinux. Eu indico 4gb pois é o que acaba vindo por padrão na maioria das distros baseadas no Ubuntu em uma instalação automática.
Anyway, dá uma lida nesta tabela, “cortesia” do @thespation neste tópico
