Nowy właściciel, Antoni d'Espinay, był paziem króla Henryka II Walezjusza. Zamieszkał w Saint-Michel-du-Bois i pozostawił zamek Challain w rękach zarządcy. W 1599 wdowa po Antonim sprzedaje posiadłość Krzysztofowi FouquetowiRené de l'Esperonnière, vol. 1, Angers, Lachèse, 1894, 783 p., s. 437. Fouquet pełnił funkcję Przewodniczącego Parlamentu w Bretanii, mieszka głównie w Rennes, ale czasami odwiedza Challain i chce odbudować zamek, opisywany jako podupadły. Porzuca ten projekt na poczet założenia w Challain klasztoru karmelitów. W 1650 jego wnuk Krzysztof został mianowany wicehrabią Challain, a 7 lat później kasztelania przekształciła się w hrabstwoRené de l'Esperonnière, vol. 1, Angers, Lachèse, 1894, 783 p., s. 442.
W 1747 r. Urbain Le Roy, pan Bourgonnière, kupił od spadkobierców Fouqeta miejscowość Challain oraz zamek. Tytuł hrabiego Challain, wygasa wraz ze śmiercią ostatniego Fouqueta w 1722 roku, a w 1749 zostaje przekształcony na: ,,Hrabia de La Potherie"René de l'Esperonnière, vol. 1, Angers, Lachèse, 1894, 783 p., s. 447. Wnuk Urbaina Ludwik Le Roy de La Potherie w czasie rewolucji przebywa na emigracji, w 1801 r. wraca do Francji, a następnie uczestniczy w wojskowym i politycznym życiu podczas Restauracji Burbonów. Pełni funkcje marszałka i posła. W 1825 roku jego jedyny syn, Karol, ginie w pojedynku.