Jusqu'au début du 19e siècle, l'endroit constituait l'angle nord des fortifications de Niort, avec ici une tour d'angle appelée tour de la Folie et des parties de murs parallèles au quai, jusqu'à la rue de la Poterne. La tour et ces portions de murs apparaissent encore sur le plan dit d'alignement de Niort en 1820, époque à laquelle la destruction des fortifications est en cours. Sur le plan cadastral de 1846, la configuration des lieux a peu évolué, si ce n'est que les murs ont disparu de même que certains bâtiments les plus au nord, laissant la tour seule dans son angle de parcelle, aux portes du jardin des plantes. Il existe une petite maison en bordure de quai et une autre, plus importante, à l'arrière, le tout appartenant à Louis Jubin époux Grimaud.

En 1865, André Bastard fait construire une chamoiserie à cet endroit, occupant l'ensemble de l'emplacement jusqu'à la tour qui disparaît alors définitivement. Seule est conservée, semble-t-il, la petite maison en bordure de quai (bien que reprise au 19e siècle, elle garde sans doute des éléments plus anciens, du 18e ou début 19e).

L'affaire est reprise en 1908 par Ludovic Martin-Bastard (1835-1915), maire de Niort de 1884 à 1904 et de 1908 à 1912 (on lui doit entre autres la construction de l'hôtel de ville). Rachetée dans les années 1920 par l'entreprise Rousseau, la chamoiserie est transformée en ganterie vers 1930 : cette transformation permettait aux Rousseau de se rembourser des dettes de leurs créanciers, des gantiers ayant fait faillite. En 1938, les activités de chamoiserie et de ganterie des Rousseau sont regroupées à Saint-Liguaire, et les bâtiments du quai de la Regratterie sont transformés en logements. L'ensemble a été restauré dans les années 2010.