Na miejscu obecnego Muzeum Calvet wcześniej znajdowała się rezydencja kardynała szacie - Ливре de Cambrai, nazwany tak na cześć żyjącego niegdyś tutaj kardynała Pierre 'a D' Eil, biskupa de Cambrai. W 1719 roku budynek został sprzedany François-René de Вильневу, markiza d ' Арзелье i panią de Мартиньян.

W 1734 roku jego syn Jacques-Ignace de Villeneuve postanowił poszerzyć swoją wiedzę i zbudować nowy pałac. Budowę rozpoczęto pod kierownictwem Thomasa Лэне, ale potem zmienili architekci Jean-Baptiste Frank i Francesco Franc. Prace budowlane zostały zakończone tylko 1749 roku. W 1802 roku posiadłość kupił негоциант Делетр, który z kolei oddał budynek do wynajęcia władz Awinionu, aby umieścić tutaj kolekcje Эспри Calvi. 3 marca 1833 budynku zostało wykupione przez gminę Awinionu pod muzeum. Od 1 października 1963 roku kamienicy, Villeneuve-Мартиньян znajduje się na liście zabytków Francji.

Tutaj znajduje się jedna z największych kolekcji malarstwa Francji. Zbierać kolekcję zaczął miejscowy lekarz (numizmatyk, bibliofil i archeolog) Эспри Calve, a później, w 1810 roku, przekazał swoje zbiory i bibliotekę muzeum malarstwa. Eksponatami muzeum są dzieła sztuki, rzeźby, porcelana, ale bardzo interesujący dział malarstwa, obejmujące okres od XVI do XX wieku — od Vasariego i Luca Giordano do Dawida, Coro, Manet, Сутина i Bonnard.

Tu, w kamienicy Villeneuve-Мартиньян, do którego zostały dobudowane nowoczesne budynki, znajduje się główna kolekcja. Biblioteka zebrane Calvet i znaczna kolekcja prawie 12 000 monet i medali zostały przewiezione w inne miejsce miasta.