Gérard Labrunie naît à Paris le 22 mai 1808, année où son père, docteur en médecine, est attaché à l’Armée du Rhin. En Allemagne, ce dernier dirige l’hôpital de Hanovre, puis celui de Breslau à partir de 1810. L’enfant est alors placé en nourrice à Loisy, une commune située non loin de Paris, à proximité d’Ermenonville. Sa mère, qui a suivi son mari outre-Rhin, décède le 29 novembre 1810. Deux années plus tard, son père est grièvement blessé à Wilna en Pologne. A Paris, on est très longtemps sans nouvelles de lui. Aussi Gérard est confié à l’oncle de sa mère, résidant à Mortefontaine. En 1814 avec la chute de l’Empire, Etienne Labrunie est enfin de retour en France. Il s’installe à Paris en compagnie de son fils.

Gérard n'a plus de relation suivie avec son père lorsqu'il hérite de son grand'père et que cet héritage lui permet de vivre seul.