Die Friedhofskapelle von Krempe wurde 1900 eingeweiht. Gestiftet wurde sie von John Ahsbahs, der neun Jahre zuvor das Ahsbahsstift, das heutige Altenheim in Krempe, erbauen ließ. Er wurde 1820 in Krempe geboren und wurde in den USA zu einem wohlhabenden Mann, der in seiner deutschen Heimat seinen Namen verewigt wissen wollte.
1973 wurde neben der neugotischen, bleiverglasten Kapelle eine neue errichtet, und, um eine Verbindungstür zwischen den beiden zu errichten, musste ein Fenster herausgenommen werden. Dieses Fenster zeigt den wittenberger Reformator Martin Luther und ist nun in der St. Peter-Kirche als beleuchtete Wanddekoration im Kirchenschiff zu finden.