Lietuviška pavardė „Dirsė“ yra kilusi iš asmenvardžio Dirsys, kuris siejamas su žodžiu „dirsti“ (žvelgti, spoksoti). Tai galėjo reikšti žmogų, kuris dažnai į ką nors įsismelkęs žiūri, arba turėti kitokią, dabar nebeaiškią, semantiką.
Įžymūs žmonės su šia pavarde:
Jonas Dirsė (1917–1945) – poetas, vertėjas, vienas žymiausių šios pavardės atstovų.
Rimantas Dirsė (g. 1954) – choro dirigentas ir pedagogas.