Aucun carrelet ne figure sur le plan cadastral de Talmont de 1831. De premières installations plus ou moins provisoires semblent apparaître au début du 20e siècle. En 1906, M. Seule, courtier à Talmont, est ainsi autorisé par la municipalité à occuper un terrain "sur le rocher de Deaux" (pourtant commune d'Arces), pour y établir "une installation de pêche à la ligne". En mai 1918, M. Mauvillain obtient à son tour une autorisation pour pêcher avec un carrelet à la pointe de Cornebrot. La majorité des pêcheurs, souvent occasionnels, se contentent toutefois encore de petites installations provisoires, comme la grande trule visible sur une carte postale du début du 20e siècle.

Comme sur toute la côte saintongeaise de l'estuaire, le développement des carrelets ne touche vraiment la commune qu'à partir de l'Entre-deux-guerres, de manière encore très limitée. A cette époque, parmi la population aisée et/ou d'arrière-pays, se développe la mode de disposer de cabanons en bord de mer, pour bénéficier d'un site agréable et pratiquer une pêche davantage de loisir que lucrative. Les falaises vives que l'on trouve à Talmont se prêtent particulièrement bien au développement de ce type de pêcheries : ici, la marée haute vient jusqu'au pied de ces falaises et l'on n'a donc pas besoin d'établir de trop longues passerelles entre la côte et l'abri, comme c'est le cas dans les marais plus au sud ; les éboulements de falaise nécessiteront toutefois ici aussi d'avoir recours à cette technique.

Des carrelets apparaissent sur une vue aérienne de 1937, à la pointe nord du Caillaud ou pointe de Cornebrot, près de la tour Blanche et sur la falaise sud du bourg, en face du chevet de l'église. Déjà, leur installation suscite des réserves de la part de l'administration : en 1940, la préfecture demande à Mme Ladoire de retirer le carrelet qu'elle possède sur la falaise du côté de la tour Blanche, installé semble-t-il dans un abri creusé dans la roche. Tout en reconnaissant qu'il est important d'empêcher "que des cabanes grossières édifiées sur des appontements n’enlaidissent la falaise », le conseil municipal, soutenant Mme Ladoire, rappelle que "de tout temps, les habitants de Talmont ont pêché librement au carrelet tout autour de la falaise", ce qui leur procure un complément de ressource essentiel.

Dans les années 1950, on aperçoit quelques carrelets au Caillaud sur des photographies et cartes postales. Le phénomène s'accélère dans les années 1960. En 1964, on compte 15 carrelets entre la pointe sud et la pointe nord du Caillaud ; au même endroit, ce nombre atteint 27 en 1977, auxquels s'ajoutent 4 à la pointe de la Tour Blanche. Emportés par la tempête de 1999, beaucoup de carrelets ont été reconstruits par la suite, malgré une limitation de leur nombre et une réglementation plus stricte de leur architecture. On n'en dénombre plus que 17 en 2013, dont 13 à la pointe nord du Caillaud et 4 à la Tour Blanche.