Situada no centro histórico de Gouveia, a Casa da Torre está classificada como monumento nacional por decreto de 1928. A sua data de construção remonta ao século XVI, vindo a pertencer, posteriormente, aos marqueses de Gouveia. De arquitetura manuelina, é composta por três pisos e janela com inscrições em letra gótica. Em 1990/1991, o edifício sofreu obras de reparação.