Višnja Gora je bila včasih vsa obdana z obzidjem. Sedaj je delno še ohranjeno obzidje na zahodni strani Doline, dobro ohranjen pa je Cvinger na vzhodni strani.

Na Cvingerju je včasih stal lesen vojaški stolp, ki pa je bil porušen ob bombandiranju Višnje Gore v letu 1943. Razen v turških časih, so Višnjanje napadali nepovabljne goste iz Cvingerja tudi v moderni dobi. Zadnji tak napad z gasilskimi curki so izvedli v začetkutega stoletja na Stičane, ki so nam za Pusta pripeljali tramvaj, ki ga mesto nima, kot protidar za sodnijo, ki so jim jo leto poprej v času pustovanja pripeljali Višnanje (leta 1900 se je namreč sodnija preselila iz Stične v Višnjo Goro).