La rocca è stata eretta dai Visconti nel XIII sec. ma è passata molto presto nelle mani degli attuali proprietari, i Borromeo, nel 1449. Fra la sale storiche, tutte arredate e decorate, la Sala di Giustizia è ornata da mirabili affreschi del XIV sec. che narrano la vita dell'arcivescovo Ottone Visconti. La fortezza ospita inoltre il Museo della Bambola e del Giocattolo, che costituisce uno dei più importanti musei europei in questo ambito. Dalla Torre Castellana si abbraccia un ampio panorama.