La construction du Palazzo Pfanner remonte à 1660. Ce sont la famille Moriconi, membres de la noblesse marchande de Lucques qui en ont commandé la construction. Ruinée par la faillite, la famille Moriconi fut obligée en 1680 de vendre le bâtiment à la famille Controni, marchand de soier qui s'était élevé à la noblesse.

La famille Controni agrandit le bâtiment: vers 1686, elle présida à la construction du grand escalier monumental, probablement sur les plans de l'architecte de Lucques Domenico Martinelli, actif notamment dans les capitales européennes de Vienne et de Prague; au début du 18ème siècle, ils firent probablement appel à Filippo Juvarra pour rénover le jardin situé derrière; toujours à la même époque, ils confièrent la décoration des voûtes de l'escalier et de l'intérieur de la demeure aristocratique aux peintres «quadraturisti» locaux.

C'est dans la résidence que la famille Controni a offert l'hospitalité au prince Frédéric du Danemark [qui avait besoin de l'ambiguïté] pour faire le Grand Tour d'Italie. La famille Pfanner s'est intéressée à l'histoire centenaire du Palazzo Pfanner vers le milieu du XIXe siècle.

C’est bien Felix Pfanner (1818-1892), brasseur local de Hörbranz (Autriche), mais issu d’une famille bavaroise, qui acquiert progressivement l’ensemble de la structure après y avoir installé sa brasserie en 1846, le premier dans le duché de Lucques et l’un des premiers en Italie. La brasserie historique Pfanner, le site de production agréable et le café en plein air situés entre le jardin et les caves du Palazzo, ont été fermés en 1929. Avec ses pelouses, ses fleurs ornementales, ses plantes forestières et ses pots de citrons en terre cuite accompagnant le chapelet monumental du XVIIIe siècle. Statues du siècle illustrant les divinités de l’Olympe grec et des Quatre Saisons, le jardin Palazzo Pfanner, attribué au génie de Filippo Juvarra, représente un excellent exemple de jardin baroque aménagé au cœur de la ville médiévale de Lucques.

La fontaine-bassine octogonale située à l'intersection des deux allées centrales et l'élégante cabane au citron exposée au nord, surmontée de deux lions et d'un basilic, emblème de la famille Controni, ornent un espace vert où haies alternées de buis et de lauriers, deux anciens fourrés de cannes de bambou, ifs, pins, magnolias, un camélia de longue date, des arbustes de pivoines et d’hortensias, des roses et des pots de géraniums.

La résidence du Palazzo Pfanner, la seule partie du palais actuellement visitable, contient une grande salle de réception avec des fresques peintes vers 1720 par Pietro Paolo Scorsini, appartenant au soi-disant "quadraturismo", certaines pièces latérales avec un vaste ensemble de meubles d'époque, meubles, objets sacrés et une magnifique statue en bois du XIVe siècle représentant l'archange Michel.

La résidence présente une exposition permanente d'instruments médico-chirurgicaux et de textes médicaux anciens ayant appartenu au Dr Pietro Pfanner (1864-1935), chirurgien, philanthrope et maire de Lucques de 1920 à 1922. Le Palazzo toujours la propriété de la famille Pfanner qui, à partir de 1995, a entrepris des travaux d’amélioration exigeants en lançant des travaux de restauration et a ouvert le palais aux visiteurs.