Anche meno per la swap volendo.
La regola di massima è grosso modo il doppio della tua RAM, col limite di 512 MB. Oltre è sostanzialmente ininfluente.
Caso particolare è se vuoi usare le funzioni di "Sospendi su Hard Disk". In questo caso devi avere una swap almeno uguale alla tua memoria RAM.
Personalmente, non mi fido ancora molto di queste funzionalità su Linux, e non ne ho avuto nemmeno molto bisogno. Però puoi provare.