Em 1739, o Castelo é concedido ao mestre do pedidos no Parlamento de Paris, Nicolas Bertin de Vaugyen e depois a Jacques-Donatien Leray a partir de 1750.
Quando Jacques-Donatien Leray chega a Chaumont, a ala Norte do Castelo ainda existe. Esta comporta uma grande torre-porta no canto noroeste, uma cortina irregular e coberturas variadas. Alberga principalmente uma grande sala dedicada às receções e aos festins. A ala Norte mostra importantes sinais de vetustez. Além disso, Jacques-Donatien Leray elimina-a, no ano da sua aquisição, em benefício de um terraço aberto para um amplo e volumoso panorama sobre o rio Loire.
Leray morre em 1803 e é o seu filho James que herdará a propriedade.
No exílio imposto por Napoleão, Germaine de Staël aproveita a ausência do seu amigo James Ray para ficar em Chaumont, de Abril a Agosto de 1810, a fim de corrigir e supervisionar a impressão, em Tours, do seu livro «De L’Allemagne». A presença de Madame de Staël, conduz a Chaumont mais do que um hóspede célebre, cortesão do seu exílio, como Madame Récamier, Adelbert Von Chamisso, os condes de Sabran e de Salaberry, bem como o autor de «Adolphe», Benjamin Constant.
Em 1833, o conde de Aramon adquire a propriedade. Dedica o essencial dos seus esforços à criação do parque que sempre faltou a Chaumont. Após a sua morte, a viúva volta a casar-se com o visconde Joseph Walsh, que contrata o arquiteto Jules Potier de la Morandière para restaurar o Castelo, classificado como Monumento Histórico desde 1840. Apesar dos seus esforços, este último não consegue manter o seu caro programa de reconstrução. Em 1872, Chaumont é novamente colocado à venda.
Contemporâneo célebre: o grupo de Coppet
Durante a sua estadia em Chaumont, Germaine de Staël convida numerosas personalidades. Entre elas, os «membros» do grupo de Coppet. Podemos citar o romancista, homem político e intelectual francês Benjamin Constant, o escritor François-René de Chateaubriand, o poeta britânico George Byron ou ainda a amiga íntima de Germaine de Staël, figura-chave da oposição ao regime de napoleão, Juliette Récamier. Estas personalidades partilham numerosos pontos comuns: um interesse pronunciado pela literatura, uma sensibilidade religiosa protestante que tem uma importância primordial na maturação do pensamento liberal, uma filiação com as Luzes e uma forte oposição ao despotismo de Napoleão 1º.
