L'ensemble architectural formé par l'ancien palais épiscopal, le séminaire et la chapelle a commencé à être construit au début du XVIIe siècle, sous l'égide de l'évêque de Guarda D. Nuno de Noronha.