Depuis l'époque médiévale, Lagariça est habitée par la famille des «Pintos», les nobles et les seigneurs de Riba de Bestança, à Torre de Chã, et du palais de Covelas, dans l'ancienne commune de Ferreiros. Gonçalo Martins Cochofel fut sans doute le premier seigneur de Lagariça, suite à son mariage, au début du XVIe siècle, avec Briolanja Pinto, de la famille des Pintos de Covelas. Au Moyen Âge, la tour a probablement servi de tour de guet de toute la région environnante. En 1610, elle appartiendrait à la famille des Pintos Cochoféis, qui ont réalisé des travaux pour adapter la tour à une maison de famille. Le nom Casa da Torre (maison de la tour) advient de la présence de l'ancienne tour du château qui est adossée au manoir. Le manoir et la tour ont été classés Bien d'intérêt public, par décret du 29 septembre 1977. Cette maison est considérée comme étant l' «Illustre Maison de Ramires», décrite dans le roman du même nom de l'écrivain Eça de Queiroz.