Il est fait plusieurs fois mention au XVème siècle du fief de Lys. Le château comprend initialement un pavillon flanqué de deux tours rondes et accolé à un corps de logis. Il appartient alors à une famille du même nom, semi-agricole, semi-bourgeoise.
Par la suite, Lys passe entre les mains de plusieurs propriétaires, dont François LOMET, député du tiers état aux États généraux en 1789. A partir de cette époque, le château subit plusieurs remaniements qui transforment complétement son aspect primitif.
