Budowę obecnego pałacu Albergati (zbudowanego i należącego do ważnej rodziny homonimicznej z Bolonii) zaczęto budować 28 kwietnia 1519 r. Na miejscu starszych budynków mieszkalnych przy Via Saragozza. Projekt pałacu przypisuje się Baldassarre Peruzzi lub Domenico da Varignana.
Pałac ma wyjątkową pozycję na jednej z ważnych ulic centrum miasta. Jego monumentalna pierzeja przybrała obecny wymiar w pierwszej dekadzie XVII wieku. Wewnątrz pałacu znajdują się cenne freski z XVII i XVIII wieku: słynne jest „Fregio” Bartolomeo Cesi przedstawiające historię Hannibala i niektóre sceny z drugiej wojny punickiej.
Pałac Albergati rozpoczął pożar 8 sierpnia 2008 r. Po tym pożarze zaczęto odnawiać zarówno parter, jak i pierwsze piętro pałacu, w szczególności malowidła ścienne, barokowe stiuki i dekoracje sufitów, które pierwotnie powstały między XVII i XIX wiek. szczegóły (po włosku)