Lietuviška pavardė, kilusi iš Lenkijos vietovardžio Skaruby. Gali būti susijusi su žodžiu „skaruba“ (raižytas, briaunotas daiktas ar žemės reljefas). Žymiausias jos turėtojas – Robertas Skarubskas, Lietuvos ir Rusijos teatro bei kino aktorius, vaidinęs seriale „Tyla“. Pavardę taip pat turėjo keli XIX a. Lietuvos dvarininkai ir kunigai.