Sistem zagotavlja osnovno ogrodje ali primitive za gradnjo takšnih okolij GUI: risanje in premikanje oken na zaslonu, upravljanje z miško in/ali tipkovnico. Ne predpisuje uporabniškega vmesnika - to urejajo posamezni odjemalski programi. Zato se vizualni izgled okolij na osnovi sistema X precej razlikuje: različni programi imajo lahko bistveno različne vmesnike. X je zgrajen kot dodatni aplikacijski sloj na vrhu jedra operacijskega sistema.
Z razliko od predhodnih zaslonskih protokolov so X posebej izdelali za rabo prek omrežnih povezav in ne posebej na eni zaslonski napravi. X ima omrežno transparentnost, kar pomeni da se lahko naprava, kjer se izvaja aplikacijski program (odjemalska aplikacija) razlikuje od uporabniške krajevne naprave (zaslonskega strežnika).
Ker je okenski sistem X že relativno star in ima kljub mnogim dobrim lastnostim tudi določene omejitve so se v zadnjih nekaj letih začeli razvijati novi, sodobnejši okenski sistemi, na primer Wayland in Mir.