Oberhalb des Dorfes Pfaffenhofen, weithin sichtbar, steht die Burgruine Hörtenberg. Im Mittelalter war darin das Gericht untergebracht, bevor es später nach Telfs übersiedelt wurde. Heute ist nur noch ein Burgfried übrig, der zum Schutz mit einem Dach versehen wurde.

Der gemütliche Spaziergang von Pfaffenhofen aus zur Burgruine Hörtenberg führt durch den dichten Wald, der immer wieder tolle Blicke auf Pfaffenhofen, Telfs und umliegende Orte preis gibt.