Un X server è il server di visualizzazione nello stack grafico X11. Disegna le finestre sullo schermo, elabora l'input da tastiera e mouse e media l'accesso tra le applicazioni e la sessione dell'utente. In pratica, molti programmi X11 si connettono all'X server tramite un socket locale e, a volte, tramite una sessione di rete, quindi diventa un confine di fiducia centrale per i sistemi desktop.
La sicurezza è importante perché le vulnerabilità nell'X server possono influire sull'intero ambiente grafico, non solo su una singola app. Un bug può consentire a un attaccante di mandare in crash la sessione, leggere dati sensibili dello schermo o dell'input, oppure, nel peggiore dei casi, eseguire codice con i privilegi del servizio di visualizzazione o dell'utente autenticato. Chi difende riduce il rischio mantenendo aggiornati i pacchetti X.Org, limitando chi può connettersi al display, disabilitando l'accesso remoto non necessario e migrando, quando possibile, le applicazioni X11 legacy verso livelli di compatibilità più sicuri come Xwayland.