Το 1824, στην περιουσία του Κάστρου του Δράκου, υπήρχε ένα αγροτικό κτίριο και ένα σπίτι κατηγορίας 5, ιδιοκτησία της οικογένειας Vigneras. Αυτή η περιουσία μοιράστηκε με κληρονομιά γύρω στο 1850. Το 1860, η κα Jardel-Laroque, το γένος Gérard, αγόρασε εκτάσεις στο Dragon και έχτισε ένα σπίτι κατηγορίας 2, που ολοκληρώθηκε το 1862. Το 1874, ο J.-A. Charriol αγόρασε αυτή την ιδιοκτησία, κατεδάφισε μερικώς το υπάρχον σπίτι και έχτισε ένα νέο συγκρότημα, το κάστρο, που ολοκληρώθηκε το 1876 και τελείωσε το 1877. Έχτισε επίσης, μαζί με το κάστρο, τους στάβλους, το σπίτι του φύλακα και ένα υπέροχο περιστερώνα σε σχήμα παγόδας, που είναι ακόμα ορατά σήμερα.
Το 1882, το κάστρο αποκτήθηκε από τη χήρα του Herman Cruse, Sophie Lawton, και παρέμεινε για πολύ καιρό σε αυτή την οικογένεια. Κατά τη διάρκεια του Β' Παγκοσμίου Πολέμου, καταλήφθηκε από τον γερμανικό στρατό, όπως και άλλα κάστρα του Bouliac, και ορισμένοι τεχνίτες του δήμου αναγκάστηκαν να εκτελέσουν εργασίες συντήρησης εκεί.
Στα τέλη του 20ού αιώνα, το κάστρο μετατράπηκε σε οίκο ευγηρίας, αλλά η παύση της λειτουργίας του σήμανε την αρχή της εγκατάλειψης της περιουσίας. Αυτή γρήγορα έπεσε θύμα κλοπών και βανδαλισμών.
