Gerade mal unter Ubuntu mit folgender JDK Version gestartet:

java version "1.6.0_23"
OpenJDK Runtime Environment (IcedTea6 1.11pre) (6b23~pre11-0ubuntu1.11.10.2)
OpenJDK Client VM (build 20.0-b11, mixed mode, sharing)

Client GUI konnte ich problemlos starten, es scheint bei dir irgendein GUI Fehler zu sein.
Ist das ein Ubuntu in der Serverversion auf dem du die grafische Oberfläche nachinstalliert hast?