Il conte Giuseppe Primoli , figlio di Pietro Primoli e della principessa Carlotta Bonaparte, donò alla città di Roma la sua importante collezione: opere d’arte, cimeli napoleonici, memorie familiari, racchiusa nelle sale al pianterreno del palazzo.
La collezione nacque dal desiderio di offrire una testimonianza dei fasti imperiali e di documentare gli intensi rapporti che legarono i Bonaparte a Roma.