Au cœur de la Camargue, le château tire son nom de celui d'un des propriétaires du domaine : François Joseph d'Avignon d'Arlatan, qui y bâti au XVIIIème siècle le 1er édifice. Mais l'heure de gloire est l'époque où le riche négociant marseillais Louis Noilly Prat l'achète et le transforme en pavillon de chasse. Mais l'intérêt de la conception tient surtout au rêve un peu fou qu'il a réalisé ici. Il a intégré pour son plus grand confort et pour les nécessités des travaux agricoles, tout ce que l'époque connaissait de plus à la pointe de la technique : éclairage électrique, chauffage central, eau courante chaude et froide, salles de bains équipées... le palais des modernités des années 1890.
A l'intérieur se trouvent des œuvres d'art : peintures, céramiques, tapisseries, tout est encore en place : du linge jusqu'au pot de chambre, en passant par la batterie de cuisine.