Die Wasserburg wurde von Seyfried von Otting erbaut. Er war bischöflicher Kammermeister und hat viele Burgen gesehen und so lag es nahe, dass er sich um das Jahr 1325 seine eigene Burg auf einer hügeligen Erhebung in Tagmersheim bauen ließ.
Unter Feldhauptmann Jörg Truchseß von Waldburg rückten die Soldaten vor der Burg an und schließlich wurde sie am 12. Juli 1523 niedergebrannt und völlig zerstört, weswegen man heute kaum Überreste dieser sieht.