Net als de rots van Gibraltar was het fort van de zwavelheuvel in handen van twee Europese machten, die elkaar hebben gevochten voor controle over deze heuvel en het eiland. Zowel de Britten als de Fransen bouwden forten om zichzelf te verdedigen tegen de Spanjaarden en tegen elkaar.
In 1689 konden de Fransen het Britse fort Charles in Sandy Point veroveren. Door kanonnen naar Brimstone Hill te nemen die Fort Charles over het hoofd konden zien. De Britten konden vervolgens Fort Charles heroveren in 1690. De Britten waren zich bewust van het strategische belang van de bouw van dit prachtige fort.
En dat is slechts een voorproefje van de rijke geschiedenis die tijdens onze exclusieve wandeling moet worden verkend.