Das Kloster Frauenberg, die erste Burg der Herren von Bodman, erzählt eine ganz besondere Geschichte. Noch heute erinnert ein Sandsteinobelisk unterhalb des Gebäudes an die Entstehung des Klosters: 1307 war die Familie der Ritter von Bodman mit Verwandten auf der Burg versammelt, als ein Gewitter aufzog, ein Blitz einschlug und die Burg niederbrannte. Der Überlieferung nach rettete die Amme den etwa einjährigen Stammhalter dadurch, dass sie ihn in einen eisernen Kessel setzte und das Gefäß den Berg hinunterrollen ließ. An der Stelle des Denkmals soll der Kessel mit dem unversehrten Knaben aufgekommen sein. Der Vater des Geretteten schenkte daraufhin den Berg mit der Burgstelle dem Zisterzienserkloster Salem mit der Auflage, eine Gedächtniskapelle und ein Priesterhaus zu errichten. Die Wallfahrtskapelle mit der ehemaligen Zisterzienserklause für die Öffentlichkeit zugänglich.