Inscrit à l'inventaire supplémentaire des Monuments Historiques, le château est d'époque Louis XIII. Propriété de la famille d'Estutt de Tracy, il a été construit par le grand argentier des ducs de Bourbon en briques polychromes.

Le Château
La première gravure connue date du XV eme siècle et le château est dans la famille depuis 1640, par le mariage d’Edmée de la Platière avec François d’Estutt, Seigneur de Tracy.

Depuis lors, Paray ne quitta plus cette famille dont certains membres s’illustrèrent particulièrement, tel Antoine (1754-1836) qui représenta la noblesse aux états Généraux et s’unit ensuite au Tiers Etat.

Commandant de cavalerie sous les ordres de la Fayette, il fut emprisonné en 1793. Elève de Buffon et de Lavoisier, il profita de ce repos forcé pour élaborer  son système philosophique dit des « idéologues ». Sénateur inamovible jusqu’en 1814, il fit partie de l’Académie française.

Son fils Victor d’Estutt, Marquis de Tracy (1781-1864), servit dans l’armée jusqu’en 1818, fut élu député de l’Allier et nommé Ministre de la Marine en 1848. Agronome éclairé, il se consacra à la mise en valeur de la Sologne. Ami de Mathieu de Dombasle, il fut le premier à se servir de sa fameuse charrue.

Les portraits de Victor de Tracy et de sa femme Sarah Newton sont dans la bibliothèque du château.

En 1880, Jacques, Marquis de Tracy, construisit une aile sur la façade d’arrivée qui doublait la taille de cette demeure.

Détruit en très grande partie par un incendie en novembre 1968, le château reconstruit par son propriétaire actuel, Claude, Marquis de Tracy, a retrouvé ses proportions d’origine.

La chapelle
En suivant la petite allée qui débouche sur la charmille, on arrive à la chapelle, construite en 1719 à l’occasion du mariage de Joseph d’Estutt de Tracy avec Charlotte Bénédicte Victoire Marion de Druy (voir armoiries au-dessus de la porte d’entrée).

Cette petite chapelle est désaffectée depuis la fin du XIX eme siècle.