L’histoire des Ginoux et du château de Sucy-en-Brie commence avec César Ginoux (1746-1838), écuyer, conseiller et secrétaire du Roi. César achète le château de Sucy-en-Brie et parvient pendant la Révolution française a garder le château moyennant l’artifice d’une vente fictive. Il va faire effectuer de nombreux ajouts dans le parc, l’aménageant « à l’anglaise » et y faisant construire des fabriques : le temple de la Paix, le pavillon hexagonal et le pavillon du couchant. Ces constructions ont actuellement disparu.

Il se rend acquéreur en 1794 de l’importante ferme de Grenelle (environ 123 hectares). César Ginoux est nommé maire de Sucy-en-Brie le 19 octobre 1806 par décision du préfet. Il conserve ce mandat jusqu’en 1838.

Étant sans héritier direct, c’est sa nièce, Marie Ginoux (1783-1863), qui hérite du château. Elle a épousé un cousin, Gabriel-Raymond Ginoux (1769-1850). Celui-ci sera maire de Sucy-en-Brie de 1838 à 1844 puis de 1846 à 1850. Étant eux aussi sans héritier direct à la mort de Marie, c’est son frère Philibert Ginoux qui devient le châtelain suivant.

En 1870, durant la guerre, le château est ravagé du fait de l’occupation de la ville de Sucy-en-Brie par les Prussiens. Une lettre envoyée au comte Defermon décrit la situation le 6 février 1871 : L’extérieur des bâtiments et le parc n’ont pas souffert mais à l’intérieur du château tout (sauf la bibliothèque) est entièrement, complètement pillé et dévasté, il ne reste rien.

À la mort de Philibert Ginoux, deux de ses fils, César et Charles, héritent conjointement du château. Charles Ginoux en devient le propriétaire unique le 20 octobre 1877 (voir Bernard Méa, Nouvelle histoire de Sucy-en-Brie, t. 3 : La grande mutation. Du village à la banlieue. 1804-1914, Société historique et archéologique de Sucy-en-Brie, 1996). Il est élu maire de Sucy-en-Brie en 1881 et conservera ce mandat jusqu’en 1892. Charles Ginoux a personnellement contribué à la sculpture des éléments décoratifs de la façade nord du château. Faisant face à des difficultés financières, Charles Ginoux vend le château, son mobilier et son parc le 30 juillet 1892 à Lady Louise Caroline Bradnell Bruce Meux pour la somme de 575 000 francs.