Замок Висконти, или Кастелло Висконтео, был построен Галеаццо Висконти между 1360 и 1365 годами. Посетители, проходящие через комнаты, до сих пор имеют прекрасные фрески периода Висконти и Сфорца. Северное крыло сейчас отсутствует. Когда-то это была резиденция герцога, с видом на парковую зону Parco Visconteo и связь с Certosa (Charterhouse). Тем не менее, гармония замка - один из замечательных примеров позднеготической ломбардской архитектуры - не повреждена.

После Второй мировой войны замок является местом расположения городских музеев Павии. В музеи входят следующие коллекции: археологический и раннесредневековый раздел с великолепными археологическими останками римского, готского и ломбардского, романский и ренессансный отделы, галерея Маласпина, включающая работы XIV-XVI веков, и раздел, посвященный XVII и XVIII векам. веков, Галерея XIX века, Коллекция Мороне, Музей Рисорджименто, Гипсотека, Этнографический музей Робекки Брикетти и пространство для размещения временных выставок. После реконструкции конюшни замка городские музеи пополнились еще одним выставочным пространством.