D'abord une maison de pension pour des vacanciers, la Villa des Vacances proposait des séjours de quelques jours aux touristes, agrémentés d'une variété d'activités.

« C’est dans cette maison que François Marois, un charlatan surnommé ''docteur L’Indienne'', aurait assassiné un jeune colporteur en 1829; ce meurtre est évoqué dans L’Influence d’un livre (1837), un roman de Philippe Aubert de Gaspé fils. »