De oorspronkelijke grootte van het kernkasteel is onbekend, maar het moet minstens drie keer zo groot zijn geweest als het gebied dat vandaag de dag bewaard is gebleven. De kernburcht was omringd door een twee meter brede ronde muur. Ervoor lag een 14 meter brede gracht, uitgegraven in de rots. De gebouwen die aan de binnenkant met de ringmuur verbonden zijn, zijn boerderijgebouwen en torens die meerdere keren werden verbouwd en pas in de tweede helft van de 12e eeuw werden opgetrokken
. De opgegraven muren werden versterkt, gedeeltelijk voltooid en in hun huidige staat gelaten, ook al betekent dit dat er muren naast elkaar staan die oorspronkelijk niet tegelijkertijd bestonden.
Overigens is de aangrenzende steengroeve een van de Sauerland-Seelenorte. Het is zeker de moeite waard om een bezoek te brengen aan de kalksteengroeve, die begroeid is met gras en klimop en wordt omringd door beukenbomen(www.lennestadt-kirchhundem.de/de/neusta-touren/seelenortwanderung-steinbruch-peperburg).
Als je liever op twee wielen reist, kom je tijdens je tocht over de SauerlandRadring onder de Peperburg door.