Lietuviška pavardė „Skirmuntas“ kilusi iš žodžio skirmus – greitas, miklus, judrus, veržlus. Tai buvo pravardė, galėjusi nusakyti žmogaus charakterį ar elgesį.
Įžymūs žmonės su šia pavardė:
Marijonas Skirmuntas (1867–1939) – Lietuvos visuomenės veikėjas, diplomatas, vienas signatarų.
Povilas Skirmuntas (1892–1979) – Lietuvos karinis veikėjas, pulkininkas.
Ignas Skirmuntas (g. 1955) – dailininkas, scenografas.