In het begin van de vijftiende eeuw was Palazzo Borromeo als een "stadsregeling" die bestond uit de kern van de eigenaar, waarrond de geaggregeerde kleinere binnenplaatsen, kantoren, magazijnen, gastappartementen en meer bescheiden woningen voor ondergeschikten waren.Dit gaf prestige aan de familie waaruit het Palazzo zijn naam ontleent.Een familie die in de late veertiende eeuw naar Milaan was verhuisd en een van de leidende families van de Milanese aristocratie werd.Milanese geschiedenis herinnert zelfs aan belangrijke figuren die het palazzo bezochten, zoals St. Carlo Borromeo, kardinaal Federico en Giovan Battista die de adviseurs van Francesco Sforza waren.
Het Palazzo werd zwaar beschadigd door bombardementen in de Tweede Wereldoorlog en vervolgens gereconstrueerd door Ferdinando Reggiori.Het gebouw behoudt de originele zeventiende-eeuwse stijlgevel in blootgestelde baksteen met het prachtige gebogen portaal, bestaande uit blokken roze marmer van Candoglia en Red Marmer uit Verona, versierd met een band met grapevines en eiken takken onder een laag wapen.
Een vijftiende -eeuwse gevel staat nog steeds in de hoofdplaats met zes grote elegante ramen versierd in terracotta met een fries van een rij met verwoeste bogen onder de vensterbanken.Sporen van een fresco zijn nog steeds te zien in het gips en het is mogelijk om twee van de Borromeo -familiemotieven een glimp op te vangen: een kroon en het woord "Thumiltatis".