Présent sur le plan cadastral de 1832, le logis Les Charmilles est une maison de meunier anciennement associé à un moulin à vent, propriété de la famille Vérat dès le 18^e siècle. En 1859, le bâtiment est reconstruit par Pierre Vérat dans le style des demeures saintongeaises. Vérat fonde sa minoterie en 1864 et pour éliminer la concurrence, il rachète tous les moulins environnants. La légende veut que Pierre Vérat ait planté des charmilles dans l’entrée de Mortagne, coupant ainsi le secteur de vent de ses concurrents afin d’acquérir leurs moulins à bas prix. Le moulin encore présent aujourd’hui est le dernier acquis : propriété du boulanger Boulerne, celui‑ci accepte de le vendre à Vérat à condition qu’il ne le démolisse pas.

Le moulin conserve encore aujourd’hui une partie de son mécanisme.