Lietuviška pavardė, kilusi iš žodžio „skaržus“ (erzilus, niūrus, paniekus). Dažniausia Lietuvoje, ypač Vilniaus ir Kauno kraštuose. Žymiausias jos turėtojas – skulptorius Petras Skaržauskas (1938–2022), sukūręs paminklinę kompoziciją „Žuvusiems už Tėvynę“ Vilniuje.