Cronologia: Séc. 18 - existência de um imóvel no local, construído talvez pelo pedreiro de Vila Nova de Cerveira, Manuel Lourenço; 1838 - construção do imóvel pelo futuro 1.º visconde de Oliveira do Conde, Miguel Borges de Castro Tavares de Azevedo, natural de Anceriz, após o seu casamento com Ana Soares de Albergaria, num local que talvez pertencesse à Casa dos Soares de Albergaria.