Isolé, il se dresse en amont de la route qui traverse le village de Derby sur toute sa longueur.
Actuellement transformé en ferme, ses souterrains servaient autrefois de prison.
On peut encore voir ses belles fenêtres en pierre travaillée, ainsi que les restes du mur d’enceinte et une petite tour angulaire avec des meurtrières sur le côté est.
Il aurait servi de siège juridictionnel, mais on ne sait pas s’il s’agit de Saint Ours ou de la Cathédrale.