Elle fut vendue en 1686 au plus riche marchand du Québec: Charles Aubert de la Chesnaye.
Ce personnage fut sans doute l'homme d'affaire le plus prospère et le plus influent du XVIIe siècle au Québec. Il arrive au Québec en 1655, à l'âge de 23 ans et décède à Québec en 1702 où il est inhumé au cimetière de L'hôtel-DIeu.
Il sera donc seigneur (le deuxième] de Port-Joly (1686-1702) alors qu'il était déjà, et le demeurera jusqu'à sa mort, seigneur (le premier) de Rivière-du-Loup (1673-1702).
À partir de 1702 jusqu'en 1871 La Famille Aubert de Gaspé tissera l'histoire le la seigneurie de Saint-Jean-Port-Joli. Se succèderont 7 seigneurs appartenant à cette famille dont le dernier Philippe-Aubert de Gaspé (1786-1871) sera inhumé avec 13 membres de sa famille sous le banc seigneurial dans l'église actuelle.
Philippe-Aubert de Gaspé est également considéré comme un des pères de la littérature québécoise. Il est l'auteur du roman «Les Anciens Canadiens» paru en 1863.
Bien que fondé en 1677, le village fut brûlé lors de la conquête en 1759.
Son église, constuite en 1779, et agrandie en 1815, a été déclarée monument historique en 1963.
Le village compte quelques 3500 habitants et est le chef-lieu de la MRC de L'Islet.
Saint-Jean-Port-Joli est reconnu à plusieurs égards.
Capitale nord-américaine de la sculpture sur bois dont la réputation à cet égard s'est solidement établie depuis les années 1920.
La beauté de la région, ses atouts touristiques, son histoire, sa renommée, toutes ces raisons concourent à faire de Saint-Jean-Port-Joli un des plus importants villages touristiques du Québec, autant comme destination vacancière, qu'un arrêt important pour de nombreux voyageurs.
À cet égard la qualité des services touristiques de restauration et d'hébergement font la marque de notre village et, d'année en année, Saint-Jean-Port-Joli, est une halte reconnue par des milliers de visiteurs voyageant sur la route de la Gaspésie ou des Maritimes.
