Kilmingąją kilmę atspindinti pavardė „Milmontavičius“ yra sudaryta iš žodžių „milas“ (mielas, brangus) ir „montavas“ (kalnas, piliakalnis), galūnė „-avičius“ rodo sūnų ryšį. Tai būdinga lietuviška didikų pavardė, susijusi su LDK bajorija. Žymiausias jos nešiotojas – Kazimieras Milmontavičius (XIX a. pabaiga – XX a. pr.), Lietuvos karinis veikėjas, savanorių kariuomenės vadas. Pavardę taip pat turėjo keletas žemvaldžių ir kultūros veikėjų.