Antico palazzo gotico appartenuto alla famiglia Pesaro, fu acquistato da Mariano Fortuny per farne la propria dimora e atelier di fotografia, scenografia e scenotecnica, creazione di tessili, pittura; di tutte queste funzioni esso conserva ambienti e strutture, tappezzerie, collezioni: dalla raccolta dei dipinti, ai preziosi tessuti che rivestono interamente le pareti, alle celebri lampade, tutto testimonia la geniale ispirazione dell’artista, il suo eclettico lavoro – tra sperimentazione, innovazione, qualità altissima di risultato - la sua presenza sulla scena intellettuale e artistica a cavallo tra ‘800 e ‘900.
Il palazzo fu donato al Comune da Henriette, vedova di Mariano, nel 1956. Le collezioni museali sono costituite da un ricco fondo di opere e materiali che ben rappresentano i diversi esiti della ricerca dell'artista, ordinati per grandi argomenti di particolare rilievo: la pittura, la luce, la fotografia, il tessile e i grandi abiti.