Transformado en palazzo al unir varios edificios medievales, entre los cuales, los documentos mencionan al menos cuatro lofts, cuatro talleres y una torre. Este palazzo fue construido entre finales del siglo XIV y principios del siglo XV, pero solo fue adquirido por Mariano y Pietro Agostini. , comerciantes de seda, en 1496, que le dieron su nombre.
La fachada, totalmente revestida en molduras góticas de terracota, en las formas de plantas, cabezas humanas y diseños heráldicos, con ventanas geminadas dobles y triples, y la logia abierta (más tarde cerrada) en el piso superior, la convierten en una de las Los ejemplos más importantes de la arquitectura gótica doméstica en la Toscana. El uso de la terracota se debe probablemente al comercio de la familia Astai, ladrilleros, que fueron los dueños del palacio hasta el siglo XV. El techo se agregó durante la renovación en 1895.

A nivel de la calle se encuentra el Caffè dell’Ussero fundado en 1775 (el palacio también se conoce en Pisa como Palazzo dell’Ussero); Fue el lugar de reunión de científicos famosos y eruditos italianos y extranjeros. En 1839 se celebró el primer Congreso de Científicos Italianos en el Caffè, y sigue siendo la sede de la Accademia Nazionale dell’Ussero. Fue requisado por los estadounidenses en 1944 y renovado y reabierto en 1959.

Detrás del palacio hay un jardín colgante con cítricos, mencionado en el siglo XV, y el Cinema Lumìere, uno de los cines más antiguos. en Italia, inaugurada en 1905 en parte del Caffè, y la iglesia medieval de Sant'Ilario en Porta Aurea.