[FoLUG] Connessioni ssh instabili

[Esoel]

Ciao a tutti.
Dunque sto smanettando su un server su cui faccio esperimenti, e mi si freezano continuamente le sessioni ssh in seguito a periodi di inattivita`, anche brevi. Il terminale smette di rispondere ad ogni input(persino un ^C, devo chiudere la finestra) e quando mi ricollego il server ha una serie di sessioni "zombie" rimaste attive
$ who
utente   pts/0        Mar 10 20:24 ("mio ip")
utente   pts/1        Mar 10 21:36 ("mio ip")
utente   pts/2        Mar 10 20:24 ("mio ip")
utente   pts/3        Mar 10 21:36 ("mio ip")
utente   pts/4        Mar 10 22:15 ("mio ip")

Ho provato a far partire un ping e tenerlo attivo durante una sessione. Avevo 2 terminali con ssh e 1 con il ping aperti, dopo un po' ho controllato se ssh andava e ovviamente era freezato, mentre questo e` l'output del ping

2005 packets transmitted, 1961 packets received, 2.2% packet loss
round-trip min/avg/max/stddev = 169.735/184.211/524.372/20.443 ms

Direi che un 2,2% non dovrebbe far cadere ssh... o sbaglio?
Come posso fare a capire dov'e` il problema?
Un po' di informazioni (inutili credo) sulle macchine coinvolte:
Il client e` un macbook pro su osx (utilizzo l'emulatore di terminale di osx)
ssh -V
OpenSSH_5.6p1, OpenSSL 1.0.0c 2 Dec 2010
collegato a una rete wifi(con una connessione stabile e tutte le "tacche" piene), router netgear, connessione a internet via cavo 50Mbit(:-P).
Il server e` una debian lenny su xen (noleggiato da prgmr.com)
Linux "hostname" 2.6.26-2-686-bigmem #1 SMP Mon Jun 21 06:45:17 UTC 2010 i686 GNU/Linux 
OpenSSH_5.1p1 Debian-5, OpenSSL 0.9.8g 19 Oct 2007

Consigli? La cosa e` piuttosto irritante...
Grazie

Esoel