Lex est un générateur lexical, c'est à dire qu'il génère du code permettant de découper du texte en petits morceaux "tokens" selon les règles spécifiées: par exemple un token pourra être un mot ou un nombre.
'Timo winjruok,' kaka oti godo e Muma kelo paro mar "wilo" kata "umo," kuom ranyisi, kaka raum mowinjore nyalo umo gimoro e yo maber.