Pavardė „Vitė“ yra lietuviška, kilusi iš prūsiškos (baltiškos) kilmės asmenvardžio „Witte“, reiškiančio „balta“ arba „šviesus“. Tai gali būti ir vokiškos kilmės trumpinys iš vardų, kuriuose yra šaknis „-wit-“ (pvz., „Witold“). Lietuvoje ši pavardė siejama su dvarininkų ir kultūros veikėjų giminėmis.
Įžymiausias jos turėtojas – Mikalojus Konstantinas Čiurlionis (gimęs kaip Mikalojus Konstantinas Vitė-Čiurlionis), genialus lietuvių dailininkas ir kompozitorius. Kiti žinomi pavardės nešiotojai: jo tėvas Konstantinas Vitė-Čiurlionis (organistas), brolis Povilas Vitė-Čiurlionis (geologas), sesuo Valerija Vitė-Čiurlionytė (dailininkė). Pavardė taip pat minima Lietuvos didikų sąrašuose.