Fils du page du roi Charles X, il est issu d’une illustre famille de la noblesse française. Mais c’est en Flandre que le Versaillais fera souche.
Le 3 avril 1877, Geoffroy de Montalembert épouse à Paris Marie-Thérèse de Maurès de Malartic de Brigode dont la famille détient l’imposant château de Brigode à Annappes dont il sera maire en 1881 avant que le candidat monarchise n’entre au Palais Bourbon.