Collocato sul margine urbanizzato di casa le virgole non lontano dal fiume Po è in connessione col fronte occidentale delle Cortine murarie che difendevano il borgo Il Castello fu voluto dal Marchese di Monferrato Giovanni II Paleologo nel 1351 come strumento di dominio e di controllo militare contro la popolazione casalese.
I lavori furono avviati nel 1352 con lo scavo dei fossati, ma il cantiere si bloccò ben presto a causa di una rivolta della cittadinanza.
Potenziato a partire dal 1410 con l'aggiunta sul lato nord di un palazzo nuovo contenente ambienti residenziali e di rappresentanza, il castello conobbe una fase di radicale trasformazione A partire dagli anni 1464 e 1465. Nel corso degli anni settanta e il suo video è così modificato il proprio assetto per rispondere alle nuove esigenze residenziali burocratiche.
