Het fort heeft talrijke veldslagen meegemaakt, van 1308 tot de Tweede Wereldoorlog. Het werd zelfs tientallen jaren als gevangenis gebruikt. Toen de grote brand van 1624 veel gebouwen en structuren in de stad verwoestte, liet de toenmalige vorst, koning Christian IV, de hele stad (inclusief het kasteel) herbouwen en verbouwen. Wat je nu ziet is het gerenoveerde kasteel met prachtige torens, zalen en kamers. Op het kasteelterrein worden veel grote evenementen en concerten gehouden. In de zomer zijn er rondleidingen met gids.