To kolegium, założone przez św. Karola w 1561 r., Jest jednym z najpiękniejszych manierystycznych dworów w Lombardii. Został zbudowany w latach 1561–1588 w ramach projektu Pellegrino Pellegrini, alias Tibaldi. Następnie Richichi wzbogacił kompleks o piękne włoskie ogrody. Ten „pałac nauki”, jak nazwał go Vasari, spogląda na jeden z najbardziej godnych podziwu placów w Pawii.

Jego przód ma mocną plastikową wypukłość podkreśloną przez zdobione okna na przemian z wnękami i monumentalnym głównym wejściem. Na początku XVII wieku duża sala na pierwszym piętrze została ozdobiona obrazami poświęconymi Carlo Borromeo.
Sklepienie i północna ściana są dziełem Cesare Nebbia z Orvieto.
Ściana południowa pokazuje położenie kapelusza kardynała, praca Federico Zuccari. W latach 1818-1820 college został osiągnięty i powiększony w kierunku rzeki. Tak więc pobliski średniowieczny kościół San Giovanni in Borgo został zburzony, a jego bogate rzeźby znajdują się obecnie w muzeach miejskich.

Kolegium zostało założone, aby umożliwić utalentowanym, ale biednym studentom, którzy nie mogli sobie pozwolić na uczęszczanie na uniwersytet, poświęcić się studiom. Tymczasem podczas kontrreformacji Kolegium miało zagwarantować odpowiednie wartości moralne. W XVIII i XIX wieku prawnicy, których zadaniem było zajmowanie wysokich stanowisk w Kościele i w Mediolanie, uczestniczyli w tej prestiżowej uczelni.