La rue de la Fosse doit son nom à sa forte dénivellation et aussi du fait qu’elle menait autrefois vers la fosse, ou zone de mouillage plus profonde, située à l’entrée du port et à l’abri de la ville.