Construção do século XIV foi ampliada posteriormente. Possui um pátio fechado com uma arcada gótica. Num dos cantos deste pátio existe um pavilhão renascentista com pequena cúpula. A classificação inclui o palácio, uma capela abobada, duas fontes decorativas, um obelisco erguido a D. João VI e a capela do Senhor da Serra existente nos jardins.

A residência, mandada edificar por D. João de Castro, Vice-Rei da Índia, sofreu, posteriormente, alterações profundas. Diversas ermidas povoam a quinta. Uma delas, a de Nossa Senhora do Monte, de 1542, obedece ao estilo renascentista. Possui planta circular e apresenta no interior seis colunas com capitéis e silhares de azulejos do século XVII.