Costruito dai Malaspina intorno all'anno Mille, Il Castello di Nazzano fu potenziato da Gian Galeazzo Visconti, che ne riconobbe immediatamente la strategica posizione, intorno al 1360. Dalla cime del colle su cui sorge è infatti possibile ammirare, nelle giornate limpide e ventose, la catena che dalle Alpi Marittime arriva fino al Monte Rosa. Passato nei secoli di famiglia in famiglia giunse nel 1613 nelle mani dei Mezzabarba, conti pavesi, mani aristocratiche che ne trasformarono l’assetto, convertendolo da fortezza in maniero. Nel 1712 l'edificio fu rivenduto agli attuali proprietari, i marchesi Rovereto che definirono l’assetto per come lo possiamo ammirare oggi. A sud c'è il corpo principale con sei finestre (di cui tre a sesto acuto) ed un' isolata al piano inferiore. Nell'angolo di sud ovest si nota una minuscola torre cilindrica, rastremata all'altezza della gronda. La curiosa aggiunta è merlata alla guelfa, come la gran torre quadrangolare che svetta ad ovest. La facciata che dà sulla piazza della chiesa è caratterizzata da un alto archivolto ogivale cieco, che si disegna fin quasi alla linea del sottogronda ed inquadra una finestra a sesto acuto ed un portaletto a pianterreno. Il castello ha subito radicali restauri e fu nel 1905 definitivamente destinato a dimora residenziale.