En 1616, le château est rasé, après son occupation par les Rochelais protestants. Ce n'était plus que le logis signeurial des Lozeré et Cheusses, ce dernier héritiér par mariage de la châtellenie. Un nouveau port devait être construit sur la façade Atlantique. Colbert propose l'achat de sa terre à Jacques Henri de Cheusses qui refuse. Comme cette terre avait été aliénée au domaine royal, elle était rachetable à perpétuité. Colbert de Terron en prend possession en 1655, avec promesse de rembourser les 50 000 écus déboursés. Henri de Cheusses est resté créancier du roi et étant calviniste, il a quitté la France à la révocation de l'Edit de Nantes. Colbert de Terron avec le Chevalier de Clerville et l'ingénieur Blondel se met au travail pour faire sortir des marais un port militaire et une ville.
ROCHEFORT EN CARTES POSTALES
Rochefort ne saurait, du point de vue archéologique, rivaliser avec les cités voisines. Il est vraisemblable qu'à l'époque de la ville gallo-romaine de Saintes, Rochefort ne présentait aucun intérêt. Le rocher de Rochefort devait faire partie de l'archipel du golfe santonique.

La mer en se retirant, le point occupé par Rochefort devenait une position importante au bord du fleuve. Une colonie est venue s'y établir, peut-être des brigands , des naufragés ou des proscrits ou plus simplement des pêcheurs qui ont fondé une bourgade avant le Xème siècle.
En 847, les pirates du Nord remontent la Charente jusqu'à Saintes. Charlemagne fait fortifier tous les ports du fleuve et c'est l'époque où le premier rempart défensif est construit. C'était certainement un poste retranché, appelé Rocafortis.

Au XVIe siècle, le château passe aux mains des Anglais . En 1374, la châtellenie est réunie à la couronne de France.

Pendant les guerres de religion, la ville est prise et reprise par les Catholiques et les Protestants. En 1599 , la châtellenie est cédée à Adrien de Lozeré, premier gentihomme de la chambre du roi pour 50 000 écus.

La place Colbert
Rochefort vue du ciel
L'Arsenal et la Corderie Royale