Fort De Gagel werd tussen 1819 en 1821 aangelegd als een aarden werk. In eerste instantie bestond dit fort uit L-vormige aarden wallen met opstelplaatsen voor het geschut, omgeven door een gracht.

Vanaf 1848 werd het toenmalige werk ingrijpend gewijzigd. Tussen 1850 en 1852 werd er aan de stadszijde een vierkant bomvrij wachthuis gebouwd van 16 × 16 meter, met muren van 1,5 meter dik metselwerk. Dit gebouw was oorspronkelijk geheel door een eigen gracht omgeven en vormde zo een redoute. Boven op het wachthuis konden 2 houwitsers (kanonnen) worden geplaatst en achter muren met schietgaten was plaats voor geweerschutters.

Omstreeks 1880 werd het fort nogmaals verbeterd. Bij deze verbetering werd de gracht om het wachthuis gedeeltelijk gedempt, waarna de bomvrije kazerne en de remise werden gebouwd. Het wachthuis werd inwendig verbouwd en de open bovenste verdieping werd verwijderd. Het wachthuis is nu nog geheel in de staat van 1880 en aan alle zijden voorzien van schietgaten met de hoofdschootsrichting georiënteerd op de Gageldijk.