Conosciuto con il nome di Bibbiena, Bernardo Dovizi (1470-1520), cardinale, segretario di papa Leone X e amico di Raffaello, autore nel 1513 della prima commedia scritta per il teatro italiano, era originario di Bibbiena. Vi fece costruire questo palazzo dal semplice rivestimento di mattoni, relativamente sobrio d'aspetto ma uno dei più eleganti della città.