Tussen de rivieren de Sauer en de Gaybach verheft het Castellbergplateau zich boven het dal en het dorp Wallendorf. Al in de 4e eeuw voor Christus was er een Keltische nederzetting gevestigd op dit gebied van meer dan 40 hectare. Rond 130 voor Christus bouwden de Keltische Treveri vervolgens een grote stadachtige nederzetting, een oppidum, die werd beschermd door een machtige vestingmuur. Voor de Gallische oorlog van Gaius Iulius Caesar (58-50 voor Christus) was het een van de belangrijkste nederzettingen van de Treveri. Treveriaanse munten, waaronder zilveren en gouden munten, werden hier geslagen.

Na de verovering van Gallië door de Romeinen werd op het hoogste punt van de berg een tempelcomplex gebouwd rond de tijd van de geboorte van Christus. Een kleine nederzetting van handelaren en ambachtslieden en misschien pelgrimsverblijven grensden aan het plaatselijke heiligdom. De nederzetting werd gedeeltelijk verlaten in de loop van de Germaanse invasies in de 3e eeuw en vervolgens volledig verlaten aan het einde van de 4e eeuw.

Vanaf de zogenaamde "Römerturm", een houten uitkijktoren aan de rand van het plateau, heb je een wijds uitzicht over de valleien van de Sauer en de Our en tot in het naburige Luxemburg.

De Castellberg is met een korte omweg te bereiken, bijvoorbeeld via de rondwandeling 44 van het natuurpark Zuid-Eifel .