Il est né à Igé dans l'Orne en 1828. Il est élève à Paris du peintre animalier Jules-Léonard Schmitz.
Balleroy se fait un spécialiste des scènes de chasse et de peinture animalière.
Il expose au Salon à partir de 1853 et réalise de nombreuses gravures pour Cadart.
À la fin de sa vie, il mène une carrière politique. Il sera maire de Balleroy près de Bayeux et il sera aussi député du Calvados pendant quelques mois en 1871.