Строить его начали португальцы в 1529 году в попытках монополизировать торговлю специями в регионе. Достроили испанцы в 1611 году