En inderdaad zijn hier veel historische overblijfselen te vinden. Onderzoekers hebben ontdekt dat de oudste aarden wallen dateren uit de tijd rond de geboorte van Christus, toen Germaanse stammen in contact kwamen met de Kelten. Destijds boden de aarden wallen bescherming tegen binnenvallende vijanden. In de achtste en negende eeuw, rond de tijd dat Karel de Grote over het Frankische Rijk regeerde, ontstond er als vestingwerk een muurfort, dat vermoedelijk als tussenstation diende voor Frankische troepen.
De ruïnes van de Borbergterrassen oefenen tot op de dag van vandaag een sterke fascinatie uit – en ze vertellen de geschiedenis. Volgens de annalen zou de stad op de „Borrenberge“ ook een klein nonnenklooster hebben gehad. Opgravingen hebben de funderingen van een kerk, de poort en de funderingen van een kapel en een begraafplaats uit de 13e eeuw aan het licht gebracht.
Wandelaars genieten op de Borberg aan de Rothaarsteig van het prachtige, schaduwrijke Buchenwald. Ook de Marienkapelle, ook wel Friedenskapelle genoemd, is een bezoek waard. Deze troont sinds 1925 hoog op de klif.
Het kerkhof van Borberg ligt aan de Rothaarsteig en is te voet bereikbaar. Vanaf de wandelparkeerplaats bij de Hiebammenhütte in Brilon of het Waldhotel Schinkenwirt in Olsberg is het een wandeling van een half uur.
De Borberg is bovendien een plek voor bezinning binnen de Sauerland-Wanderdörfer.
