Questa costruzione è il regalo che Enea Silvio Piccolomini, ovvero papa Pio II, donò alla sua famiglia, infatti, la scritta incisa sull’architrave della facciata recita: "PIUS II PONT MAX GENTILIBVS SVIS PICCOLOMINEIS" ("Pio II Pontefice Massimo ai suoi parenti Piccolomini").
Le Logge del Papa sono composte da una facciata in travertino a tre arcate rinascimentali e colonne con capitelli di stile corinzio.