Die Kreuzritterburgruine stammt aus dem 11. Jh. Der bekannteste Ritter ist Heinrich von Ulmen, Teilnehmer am 4. Kreuzzug. In den Jahren 1679-89 wurden die beiden Ulmener Burgen zerstört. Die Oberburg wurde 1789 repariert. Heute ist sie ein beliebtes Ausflugsziel und Schauplatz des Burg- und Heimatfestes, das immer am 2. Wochenende im Juli stattfindet.