Von der alten Burg Warberg sind nur noch einzelne Mauerreste vorhanden, da die Burg nach ihrer Zerstörung nicht auf- sondern abgebaut wurde. Sie gehörte zu einem besonderen Typ von Burgen, den sogenannten Höhenburgen.
Es wird geschätzt, dass die Burg auf das Jahr 1100 datiert werden kann. Sie gehörte zum Typ von Burgen, die sich Höhen- oder Turmhügelburgen nennen und war laut Ausgrabungen von einer 3 Meter dicken Mauer umgeben. Geschichtlichen Überlieferungen nach wurde die Burg um 1200 während eines Rachefeldzuges zwischen den Welfen und Staufen komplett zerstört und im späteren abgetragen. Nach der Erstürmung haben die adligen Besitzer eine 2km entfernte Wasserburg aus den Überresten errichtet.