Le Palais de São Silvestre est l'établissement du monastère des Hiéronymites de São Marcos, fondé en 1451 dans un endroit isolé aux portes de Coimbra, et autour duquel c'est construit un village, appelé São Silvestre.
C'est dans cette paroisse que, dans le premier quart du XVIIIe siècle, la famille Cabral de Moura e Horta a construit la Quinta do Paço, aujourd'hui le Palais de São Silvestre. Bénéficiant d'une situation privilégiée sur la place Largo do Terreiro, situé au centre de la paroisse de São Silvestre, le Palais est une imposante demeure baroque, construite au XVIIIe siècle. En 1730, l'héritier Francisco Cabral de Moura e Horta épouse Antónia Pereira Coutinho de Vilhena, et de cette union naît l'écusson que l'on peut voir sur la façade principale.
Le palais possède aussi un blason unique représentant les Cabrais, Mouras, Coutinhos et Vilhenas (Gonçalves ; Correia : 1947).
À l’étage noble se distingue également une chapelle privée qui possédait à l'époque un magnifique autel baroque sculpté et un retable en calcaire polychrome de João de Ruão datant de 1544, avec une représentation de la Vierge à l'Enfant, assise sur une chaise à haut dossier, entourée d'anges musiciens.
Il est aussi intéressant de noter que le retable en pierre et les bas-reliefs intégrés à l'origine dans la chapelle du palais ont été exécutés dans la première moitié du XVIe siècle, environ 150 ans avant la construction de la maison, et que leur origine est inconnue, c'est-à-dire qu'on ne sait pas si l'ensemble intégrait une chapelle qui existait auparavant à cet endroit, ou s'ils ont été acquis par la famille Cabral de Moura après la construction.
