Kilusi iš žodžio „žvirgždas“ – smulkus akmenukas, žvirgždas. Pavardė galėjo atspindėti asmenybės savybes (tvirtumas, smulkumas) arba gyvenamąją vietą (akmenuota, žvyržemė).
Įžymūs žmonės su šia pavarde:
- Kostas Žvirgždys (1909–1981) – Lietuvos skulptorius, sukūręs paminklų, memorialinių lentų.
- Algirdas Žvirzdinas (g. 1937) – žurnalistas, redaktorius, visuomenės veikėjas.
- Žvirgždaičių šeima – minimi kultūros ir meno kontekstuose.
Trumpai: pavardė siejama su akmenimis (žvirgždais), garsių asmenų tarpe – skulptorius Kostas Žvirgždys.