En 1705, Monseigneur de Chalucet, alors évêque de Toulon, décide d’édifier une nouvelle église pour desservir la partie Ouest de la ville. En 1707, l’évêque créa une paroisse dans l’église Saint Sébastien située à l’angle des rues Pierre Semard et des Savonnières. Désireux de construire une nouvelle église, Il obtient alors du roi Louis XIV la concession d'une partie de la place d'Armes et, en 1709, pose la première pierre de l'édifice. Alors que la construction est déjà bien avancée, les murs atteignant plus de trois mètres de haut, les travaux sont interrompus en 1720, huit ans après la mort de Monseigneur de Chalucet, à cause d'une épidémie de peste qui décime 15 000 habitants, soit la moitié de la ville ! Les travaux ne reprennent qu'en 1767, avant d'être à nouveau stoppés en 1776, alors que l'église est pratiquement achevée. C'est le roi Louis XVI, prétextant que l'église gêne le champ de manœuvre des troupes de la garnison sur la place d'Armes, qui ordonne alors sa démolition, qui est effective en 1780. En contrepartie, suite à une demande du Conseil Municipal de la ville - accompagné paraît-il d'un "pot de vin" de 300 bouteilles de champagne - le roi accorde un nouveau terrain pour la construction d'une nouvelle église Saint-Louis à la place du couvent des Capucins2.