Ce château est commandé par René-Maurice de Kerret, officier de marine appartenant à une famille bretonne connue depuis le xiiie siècle. Celui-ci contribua au sauvetage du dolmen de Brennilis et en fit don à la Société archéologique du Finistère. Le château est construit non loin de l'ancien manoir de Quillien sur les plans de Joseph Bigot, architecte départemental, dans le style Louis XIII. Les armoiries des Kerret figurent au-dessus de la porte d'entrée, avec la devise « Tevel hag ober », « Se taire et agir ». Le château passe ensuite par héritage aux Bourbon Liguières, puis aux Moustier.