Geheimnisvolle Mauerreste, Wälle, Gräber und Hügel regen die Fantasie an. Was mag einst an diesem Ort geschehen sein – dieses Rätsel stellt man sich hier unwillkürlich.
Und tatsächlich finden sich hier viele geschichtsträchtige Relikte. Forscher haben herausgefunden, dass die ältesten Erdwälle aus der Zeit um Christi Geburt stammen, als germanische Stämme auf die Kelten stießen. Damals boten die Aufschüttungen Schutz vor einfallenden Feinden. Im achten und neunten Jahrhundert, etwa als Karl der Große das Fränkische Reich regierte, entstand als Befestigungsanlage eine Mauerburg, die vermutlich fränkischen Truppen als Etappenstation diente.
Die Ruinen der Borbergterrassen strahlen bis heute eine starke Faszination aus – und sie erzählen Geschichte. Den Annalen zufolge soll die Stadt auf dem „Borrenberge“ auch ein kleines Nonnenkloster besessen haben. Ausgrabungen haben die Grundmauern einer Kirche, das Tor und die Fundamente einer Kapelle und eines Friedhofs aus dem 13. Jahrhundert zutage gefördert.
Wanderer genießen auf dem Borberg am Rothaarsteig eine spektakuläre Aussicht auf Olsberg und die Sauerländer Bergwelt. Auch die Marienkapelle, auch Friedenskapelle genannt, ist einen Besuch wert. Sie thront seit 1925 hoch auf der Klippe.
Borbergs Kirchhof befindet sich am Rothaarsteig und ist zu Fuß erreichbar. Vom Wanderparkplatz nahe der Hiebammenhütte Brilon oder dem Waldhotel Schinkenwirt in Olsberg ist er in einer halben Stunde zu erwandern.
Der Borberg ist außerdem ein Seelenort der Sauerland Wanderdörfer.