La construcción data del sieglu XIV (aprosimao añu 1350) y ta asitiáu sobre los restos d'un Fortín Romanu del sieglu I d. C. Créese que la función d'esti fortín yera protexer una mina asitiada onde güei se emplaza la Ilesia de Santa María de Gracia, d'ende que'l so allugamientu nun tea nun puntu altu” como'l restu de Castiellos. De la so construcción orixinal entá queden restos como La Torre del Homenaxe (reconstruyida), la puerta orixinal que daba accesu al mesmu (acoldada con arcu trespuntado), un llenzu de muralla nel interior, parte de la Torre de Cubu que fai esquina con callar Abades y un restu de muralla del mentáu Fortín Romanu de siguío de la Torre de Cubu y na mesma cai. Asina mesmu sábese de la esistencia de restos d'elementos del Castiellu nel interior de les viviendes que conformen la mazana de la cortil.