Nel 1824, nel dominio del Château du Dragon, si trovavano un edificio rurale e una casa di classe 5, proprietà della famiglia de Vigneras. Questo dominio fu diviso per eredità intorno al 1850. Nel 1860, Mme Jardel-Laroque, nata Gérard, acquistò terreni al Dragon e fece erigere una casa di classe 2, completata nel 1862. Nel 1874, J.-A. Charriol acquistò questa proprietà, fece parzialmente demolire la casa esistente e fece costruire un nuovo complesso, il castello, completato nel 1876 e terminato nel 1877. Fece anche costruire, insieme al castello, le scuderie, la casa del custode e un magnifico colombario a forma di pagoda, che sono ancora visibili oggi.
Nel 1882, il castello fu acquisito dalla vedova di Herman Cruse, Sophie Lawton, e rimase a lungo in questa famiglia. Durante la Seconda Guerra Mondiale, fu occupato dall'esercito tedesco, così come altri castelli di Bouliac, e alcuni artigiani del comune furono costretti a eseguire lavori di manutenzione.
Alla fine del XX secolo, il castello fu trasformato in casa di riposo, ma la cessazione della sua attività segnò l'inizio dell'abbandono della tenuta. Quest'ultima fu rapidamente vittima di furti e vandalismo.
