A familia Andrade, señores feudais da comarca, construíu varios castelos para protexer as súas vastas leiras. En Pontedeume, o Castelo de Andrade érguese na Pena Leboreira, con vistas á desembocadura do río Eume. Na vila, o Torreón, a única parte que queda do antigo pazo, serve hoxe como oficina de turismo e centro de interpretación da historia familiar.