Der Bau der Festung St. Jakob muss um 1614 begonnen haben, wie noch heute in der Inschrift des primitiven Tores zu sehen ist. Der Beginn des Baus sollte dem wahren Meister der Werke, Jerónimo Jorge, zugeschrieben werden, der auf Madeira ankam, um Mateus Fernandes zu ersetzen, Autor der Pläne der Verteidigungsmauern der Stadt und der hier seit 1567 arbeitete.
Nach dem Tod von Jerónimo Jorge im Jahr 1617 wurde die Arbeit von seinem Sohn Bartlomy John fortgesetzt. Die erste Phase der Arbeiten der Festung muss 1637 abgeschlossen worden sein, in der Zeit von D. Filipe II von Portugal (Philipp III. von Spanien). Im achtzehnten Jahrhundert wird die zweite große Kampagne von Werken unter der Leitung des Ingenieurs Tossi Columbina (Autor des Projekts des Hafens von Funchal) unter dem Befehl des damaligen Gouverneurs José Correia de Sá besucht, der neue pyroballistische Geräte in London erwarb.
Das relative Gedenken und dieser Arbeitseingriff sind immer noch in der Inschrift vorhanden, die auf dem neuen Tor mit dem Datum 1767 zu sehen ist. Einige Modifikationen wurden in der Zeit der napoleonischen Kriege im frühen 19. Jahrhundert vorangetrieben, und die Festung diente als Kaserne für britische Truppen.
Bereits 1803 sammelten sich in der Festung viele Familien, die zur Zeit des schrecklichen Schwemmlandes obdachlos gewesen waren. In der Mitte desselben Jahrhunderts wurde das Haus des Kommandanten und der Wache gebaut.
Zu Beginn des 20. Jahrhunderts wurden wieder Verbesserungen vorgenommen, auch durch den Besuch im Jahr 1901, D. Carlos I., König von Portugal. Die Festung war damals das Hauptquartier der Mobilen Artilleriebatterie. Die Lieferung dieser Einheit an die Autonome Region Madeira erfolgte am 17. Juli 1992. Zu dieser Zeit diente es als Kaserne der Army Police und der Lancers Squadron von Funchal.
Als Projekt zur Besetzung der verfügbaren Räume beschloss die Regionalregierung der Autonomen Region Madeira, einen Militärraum und das Museum für zeitgenössische Kunst zu installieren, das 1992 gegründet wurde. Seit 1986 wird in der Quinta Magnolia in Funchal eine Auswahl von Kunstwerken unter der Bezeichnung A Nucleus of Contemporary Art ausgestellt.
Die Sammlung hat ihren Ursprung in den Auszeichnungen der Stadt Funchal, die 1966 und 1967 von der damaligen Delegation des Tourismus von Madeira organisiert wurden. Es blieb hier bis Oktober 2015, als das Museum für zeitgenössische Kunst von Funchal in die Casa das Mudas in Calheta, jetzt Mudas genannt, verlegt wurde. Museum für zeitgenössische Kunst.
♿🔴-Zugänglichkeit: Schwierig (wegen des Bodens bleiben die Räder des Geräts hängen)