Der Legende nach sollte 1680 ein schon länger erwartetes Schiff von Salzburger Kaufleuten in Venedig einlaufen. Doch das mit Gewürzen beladene Schiff traf nicht im Hafen ein.
Johann Anton Kaufmann ein Handelsgehilfe im Kontor zu Salzburg kaufte das verschollene Schiff und betete zu seinem Namenspatron, dem heiligen Antonius, dass das Schiff doch noch kommen möge. Bald darauf lief auch tatsächlich dieses Schiff im Hafen von Venedig ein und Johann Kaufmann war ein reicher Handelsmann.
1684 kaufte Johann Kaufmann Gut Söllheim und ließ als Dank an den heiligen Antonius diese Kapelle errichten.
1694 wurde die Kapelle geweiht
Am 12. April 1711 verstarb Johann Kaufmann, der Erbauer der Kapelle, im 71. Lebensjahr. Er wurde in der Gruft der Kapelle bestattet.
Antoniuskapelle mit ehem. Pfarhaus jetzt Restaurant Pfefferschiff