De Prins Frederikkazerne werd in 1863 aan de oostzijde van de oude binnenstad gebouwd. Het is een vierkant gebouw opgetrokken in rode en gele baksteen. Nadat Defensie het gebouw verlaten had is in 1981 begonnen met de verbouwing. In het complex zijn 197 woningen tot stand gekomen voor ��n- en tweepersoonshuishoudens, woongroepen en mindervaliden. De kazerne is van buiten zoveel mogelijk in de oude staat gelaten, met iets meer glas in de pui. Van binnen zijn de gangen en trappen met rood en blauw opgevrolijkt.