Ekserserhuset, lokalt benevnt -x-en, var gymnastikksal for Sjøkrigsskolen (Søcadetinstituttet) som flyttet fra Fredriksvern i 1864 og holdt til her frem til 1940. Bygningene ble etter krigen brukt av Sjømilitære korps og seinere av Befalsskolen for marinen.
Dette var landets føste innendørs idrettshall med håndballbane og turnhall. Benyttet gjennom hele historien også til sivil bruk og var også i mange år samlingssted for andre typer arrangement, dans, konsert.