nico@tower:~$ x11vnc -rfbport nnnnn -display :0

De cette manière le serveur x11vnc écoute sur le port nnnnn et affiche chez le client le display en cours sur le serveur au lieu d'ouvrir une session. Côté client il faut bien sûr de spécifier le port exo. Enfin il vaut toujours mieux rtfm.
Hope this helps