Costruito a partire dal 1883 su una rupe sovrastante il vecchio borgo, il castello fu voluto dal dottor Pietro Annibale Baraing, una delle figure di rilievo di Pont-Saint-Martin.
In stile neo-gotico, secondo il gusto del tempo, e circondato da un ampio giardino con serre e fontane, l’edificio fu terminato nel 1893.
Nel 1931 venne donato al comune di Pont-Saint-Martin che ne fece la sede del municipio; dal dopoguerra ai primi anni ’60, esso ospitò l’Avviamento Professionale Regionale.
Dopo anni di abbandono, è stato restaurato ed adibito a sede della Comunità Montana Mont Rose.