Java GUI på linux terminal OS?

Jeg håber dette er den rigtige kategori.

Jeg har set noget som jeg selv synes er rigtig smart og derfor kunne jeg godt tænke mig at vide hvordan man kan lave sådan noget selv og evt. hvis nogle har nogle links til hvordan man gør.

Jeg har siddet og arbejdet på en robot de sidste dage som køre en linux maskine på en lille industri-pc. (Debian-linux). Men istedet for at starte en eller anden GNOME eller ligende grafisk desktop op, så starter den en java GUI direkte fra terminalen.

Synes det er en rigtig smart måde at lave sit eget lille grafiske OS til at styre nogle ting. Men hvordan søren kommer man fra at have en ren terminal installation hvor man kan compile og køre et java konsol program til at kunne starte en GUI i et miljø som startede med bare at være et terminal miljø.?

Håber mit spørgsmål giver mening