Enquadrada no soberbo anfiteatro que forma a Serra da Gardunha, Castelo Novo surpreende pelos belos exemplares de casas senhoriais das famílias nobres da região. 

Ao seu castelo, edificado no séc. XII e que sofreu grandes estragos com o terramoto de 1755, foi dado o nome de "novo", já que existia nas imediações um outro que foi abandonado por não possuir boas condições para a defesa do sítio. Assim se explica que a aldeia tenha tomado o nome de Castelo Novo.

No Largo da Bica o edifício medieval dos Paços do Concelho oferece à vista várias notas curiosas, nomeadamente um belo chafariz barroco do séc. XVIII adossado à frontaria de granito, encimado pelas armas do rei D.João V, que introduz uma nota dissonante na simplicidade medieva do edifício. Por detrás, como que sentinela protectora e atenta, a antiga torre de menagem do castelo, despojada das suas funções guerreiras, indica as horas à população da aldeia.

De uma vida comunal que o tempo apagou subsiste a Lagariça, enorme lagar cortado na rocha onde durante séculos se pisou o vinho para os habitantes da aldeia.