La Academia y Compañía del Arte del Diseño, o "academia y compañía de las artes del dibujo", fue fundada en 1563 por Cosimo I de 'Medici bajo la influencia de Giorgio Vasari. Estaba compuesto por dos partes: la Compañía era una especie de gremio para todos los artistas que trabajaban, mientras que la Academia era para personalidades más eminentes de la corte de Cosimo, y supervisaba la producción artística en la Toscana. Más tarde se llamó Accademia delle Arti del Disegno. Al principio, la Academia se reunió en los claustros de la Basílica de la Santissima Annunziata. Artistas como Michelangelo Buonarroti, Francesco da Sangallo, Agnolo Bronzino, Benvenuto Cellini, Giorgio Vasari, Bartolomeo Ammannati y Giambologna fueron miembros. La mayoría de los miembros de la Academia eran hombres; Artemisia Gentileschi fue la primera mujer en ser admitida. En 1784, Pietro Leopoldo, Gran Duque de Toscana, combinó todas las escuelas de dibujo en Florencia en una sola institución, la nueva Accademia di Belle Arti, o academia de bellas artes. Fue alojado en un antiguo convento en via Ricasoli, local que aún ocupa.
La Galleria dell'Accademia fue fundada en 1784; colinda con la Accademia di Belle Arti en via Ricasoli, pero por lo demás no está conectada con ella. Ha albergado el David original de Miguel Ángel desde 1873.