Sagrađeni u 16. stoljeću, dvorac La Poupelière bio je rezidencija Guillauma Payena de la Poupelière, člana lokalnog nižeg plemstva i vlasnika sedam gospodarskih posjeda. U proljeće 1562. postao je uporište protestantizma u regiji Bocage.
Trenutni dvorac sastoji se od dva odvojena dijela. Prvi je izgrađen nakon vjenčanja Guya-Françoisa de Gonideca de Penlana, kopljanika, gospodara Vieuxchatela i Gouasselglana, s Marie-Elisabeth-Françoise Auvray de la Pouplière 19. studenog 1760. Drugi dio izgradio je André Velay kako bi smjestio svoju brojnu obitelj. Radove na obnovi i proširenju, uključujući dvoranu, nadzirao je gospodin Nénot, arhitekt sa Sorbone.
U 20. stoljeću, dvorac La Poupelière doživljava mračnu sudbinu. Kupljen je od strane barona organiziranog kriminala, Johna Palmera, iznimno bogatog kuma koji je na 105. mjestu na ljestvici Sunday Timesa, na istoj razini kao i kraljica. S imovinom procijenjenom na 53 milijuna eura, nadimak mu je Goldfinger. Circuliraju glasine da je njegovo bogatstvo stečeno masovnim nekretninskim prijevarama, osobito u sektoru prodaje "vremenski dijeljenih" prava u Španjolskoj. Dvorac je otkupljen, ovo mjesto više nije otvoreno za posjete.
