Il Castello Charles è un insieme di caseforti. Fu abitato da Jean Charles, notaio e castellano di Perloz e giudice reale di Bard, che nel 1709, avendo contribuito a liberare il forte dai francesi, fu premiato dal Duca Vittorio Amedeo II con la nobilitazione.

La casa è situata sul lato sinistro della strada carrozzabile arrivando da Pont-Saint-Martin.
Si tratta di un complesso di tre fabbricati affiancati, costituiti da quattro piani fuori terra, costeggianti una scarpata impervia con un ruscello al fondo.

La torre laterale, munita di caditoia, possiede all’interno un bel “viret” (scala a chiocciola) del 1616, ornato da una balaustra in pietra.
I due piani superiori della casa-forte presentano ancora i soffitti originali in legno; una stanza è munita di controsoffitto con vano-nascondiglio. Nella cucina è presente un enorme camino con cappa in legno.
Le cantine e le cosiddette prigioni poggiano sulla viva roccia, mentre a picco sul torrentello vi è un’apertura che facilitava la fuga dall’abitazione in caso di pericolo. Poco distante dalla torretta-ingresso è presente un’altra scala che permetteva l’accesso al corpo inferiore del castello, dove si trova una porta con lo stemma dei Vallaise-Challant, in memoria del matrimonio tra Pierre di Vallaise-Challant (ramo De la Côte) e Antoinette de Challant (1400 circa).

Questi edifici furono nel tempo rielaborati e modificati, ma la loro costruzione potrebbe risalire al XIV o XV secolo, con aggiunte del XVI e XVII secolo.