Wojskowy kompleks powstał w ostatnim ćwierćwieczu XIX stulecia dla wojska carskiego. Stacjonowało ono na tym terenie, przy obecnej ul. Dominikańskiej w Górze Kalwarii, do 1914 roku. Polskie służby mundurowe, głównie żołnierze, przebywały w tym miejscu w okresie 1916–2001 (z dwiema kilkuletnimi przerwami). Najpierw funkcjonował tu 1. Pułk Artylerii Legionów Polskich. Następnie m.in. Centralna Szkoła Straży Celnej (później Granicznej) i 1. Pułk Artylerii Najcięższej. Na koniec zaś 1. Mazowiecki Pułk Ochrony Nadwiślańskich Jednostek Wojskowych.
W byłych koszarach znajdują się powojskowe budynki z XIX i XX wieku (część odnowiono). XIX-wieczne obiekty to: tzw. koszarowce przy samej ul. Dominikańskiej (w których mieszczą się hotel z restauracją i mieszkania), Dom Żołnierza przy ul. por. Białka (dziś Ośrodek Kultury), Izba Chorych przy ul. por. Białka (dziś publiczna przychodnia) oraz gmach dowództwa w pobliżu ronda (magazyn Sądu Rejonowego).
Na terenie powojskowym są też eksponowane, pod gołym niebem: czołg, dwa pojazdy opancerzone i dwie haubice. Ponadto usytuowane są tutaj dwa pomniki: ku czci miejscowego żołnierza Armii Krajowej por. Jana Białka oraz Żołnierzom Poległym w Walce, upamiętniający m.in. lokalne ofiary zbrodni katyńskiej.