Historisch gezien wordt de Burg Altenfils voor het eerst rond 1180 genoemd in het eigendomsregister van graaf Siegfried von Bonenburg, die in 1144 overleed. Via erfopvolging kwam het vervolgens in handen van de hertog van Saksen, Hendrik de Leeuw, en wordt het in 1200 opnieuw genoemd in de verdelingsovereenkomsten van zijn zonen. Pas tegen het einde van de eeuw, namelijk in 1294, wordt Altenfels nogmaals genoemd. De aartsbisschop van Keulen belooft de burgers van Brilon, die hebben geholpen bij de wederopbouw van zijn kasteel, dat hen in geval van oorlog geen schade zal worden berokkend. In 1307, 1325 en 1326 werden er nog steeds kasteelheren op de burcht genoemd, zodat mag worden aangenomen dat deze op dat moment nog bestond.








