O Castelo inicia a sua história no século XIV com a fundação de Vila Nova de Cerveira. Após a assinatura do tratado de Alcanices, D. Dinis pôs em prática o seu plano de povoamento e defesa das terras raianas. Escreveu uma carta ao seu representante nesta terra para informar que era sua vontade fazer uma póvoa e edificar um castelo. Em 1321, atribuiu a Cerveira a sua primeira Carta de Foral e enviou cem homens para reforçar o povoamento desta terra nas margens do Rio Minho. Chamamos-lhe castelo, mas objetivamente é uma cerca fortificada porque para além da função militar, albergou desde sempre casas particulares em arruamentos bem definidos. Já no tempo de D. Dinis dificilmente caberiam no interior da cerca todas as casas dos cem povoadores. A Vila deveria estender-se além muros. O acesso ao Castelo fazia-se não como hoje pela Porta por baixo da Capela da Nossa Senhora da Ajuda, mas pela Torre de Menagem. Podemos ainda ver o escudo de D. Dinis a encimar essa entrada. Do lado do rio foi aberta uma outra porta, “A Porta da Traição”. No seu interior destacam-se os antigos Paços do Concelho, o Pelourinho, a Igreja da Misericórdia e a Capela de S. Sebastião.