Di tempat Muzium Calvet semasa merupakan bekas kediaman kardinal - Livre de Cambrai, dinamakan sebagai penghormatan kepada sekali tinggal di sini D'Ayli Pierre Cardinal, Bishop de Cambrai. Pada tahun 1719 bangunan ini telah dijual kepada Francois-Rene de Villeneuve, Marquis de bangsawan d'Arzele dan Martignano.

Pada 1734, anaknya, Jacques-Ignace de Villeneuve memutuskan untuk mengembangkan pegangan mereka dan membina istana baru. Pembinaan telah dimulakan di bawah arahan Thomas Laine, tetapi kemudian mengubah arkitek, Jean-Baptiste Francesco Frank dan Frank. Kerja-kerja pembinaan telah disiapkan hanya dalam 1749. Pada tahun 1802, beliau membeli sebuah rumah Deletro saudagar, yang kemudiannya diserahkan bangunan untuk menyewa pihak berkuasa Avignon untuk meletakkan koleksi di sini Esprit Calvet. 3 Mac 1833 bangunan ini telah dibeli oleh perbandaran Avignon untuk muzium. Pada 1 Oktober, rumah bandar 1963 Villeneuve-Martignano dalam senarai monumen bersejarah Perancis.

Ia menempatkan salah satu koleksi terbesar lukisan di Perancis. Mengumpul koleksi memulakan doktor tempatan (berkumpul mata wang, penggemar buku dan ahli arkeologi) Esprit Calvet, dan kemudian, pada tahun 1810, beliau mewariskan koleksi lukisan kepada muzium dan perpustakaan. Pameran muzium adalah karya-karya seni gunaan, ukiran, tembikar, tetapi jabatan lukisan yang sangat menarik, yang meliputi tempoh dari XVI ke abad XX - oleh Vasari dan Luca Giordano kepada Daud Corot, Manet, Bonnard dan Soutine.

Di sini, dalam rumah bandar Villeneuve-Martignano, yang telah dimasukkan ke dalam bangunan moden, ia adalah koleksi utama. Perpustakaan, Calvet dan mengumpul koleksi besar hampir 12 000 syiling dan pingat telah berpindah ke tempat lain.