V roce 1824 se na panství Zámku draka nacházela venkovská budova a dům třídy 5, vlastněné rodinou de Vigneras. Toto panství bylo kolem roku 1850 rozděleno dědictvím. V roce 1860 paní Jardel-Laroque, rozená Gérardová, koupila pozemky u Draka a nechala postavit dům třídy 2, dokončený v roce 1862. V roce 1874 J.-A. Charriol tuto nemovitost koupil, částečně zboural stávající dům a postavil nový komplex, zámek, dokončený v roce 1876 a dokončený v roce 1877. Spolu se zámkem nechal postavit také stáje, domov hlídače a nádhernou holubník ve tvaru pagody, které jsou dodnes viditelné.
V roce 1882 zámek získala vdova po Hermanovi Cruseovi, Sophie Lawtonová, a zůstal dlouho v této rodině. Během druhé světové války byl obsazen německou armádou, stejně jako další zámky v Bouliacu, a někteří řemeslníci z obce byli nuceni provádět údržbářské práce.
Na konci 20. století byl zámek přeměněn na domov důchodců, ale ukončení jeho činnosti znamenalo začátek opuštění panství. To se brzy stalo obětí krádeží a vandalismu.
