Historische stadsversterkingen

De stadsmuur bestond uit drie grote en twee kleine stadspoorten en enkele ronde torens. Tegenwoordig zijn alleen nog de overblijfselen van de stadsmuur in Weierhohl bewaard gebleven, met de Hexenturm en de Engelstoren. De Hexenturm uit de 14e eeuw is het oudste bewaard gebleven seculiere gebouw van de stad. De naam zou kunnen verwijzen naar de heksenvervolging, waarbij de toren mogelijk als gevangenis heeft gediend. Daarvoor zijn echter geen bewijzen. De lokale historicus uit Olpe, dr. Manfred Schöne, ging ervan uit dat de naam is afgeleid van „Hessenturm“.
Bovendien bevindt zich onder de stadsmuur sinds 1963 het door Ewald Mataré ontworpen gedenkteken ter nagedachtenis aan de slachtoffers van de oorlog en als memento voor de levenden, evenals sinds 1996 het Brack-monument.