Geboren im Jahr 1940, verspürte Kaußen früh seine Berufung zum kirchlichen Dienst. 1961 trat er dem Orden der Herz-Jesu-Missionare bei, studierte Theologie und Philosophie und unterrichtete zunächst am Gymnasium des Ordens in Hiltrup. Anschließend wirkte er rund elf Jahre als Kaplan in Oberhausen. Sein westfälischer, trockener Humor und seine offene Art machten ihn schnell zu einem geschätzten Ansprechpartner.
1983 wechselte Kaußen in den Dienst des Bistums Münster und wurde Pfarrer der Gemeinde St. Mariä Himmelfahrt in Feldhausen. Mehr als drei Jahrzehnte blieb er hier und prägte das Gemeindeleben nachhaltig: durch verlässliche Seelsorge, regelmäßige Gottesdienste und persönliche Begleitung in unterschiedlichen Lebenssituationen.
Ein besonderes Anliegen war ihm die Musik. Ebenfalls 1983 gründete er den Kinderchor „Die Lerchen“, der über viele Jahre hinweg das Gemeindeleben bereicherte und Generationen von Kindern und Familien Freude, Gemeinschaft und musikalische Heimat schenkte.
Auch nach seiner Zeit in Feldhausen blieb Kaußen seelsorglich aktiv. In Marl-Polsum begleitete er weiterhin Menschen und feierte dort sein 50-jähriges Priesterjubiläum. Im Ruhestand zog er nach Dorsten, blieb jedoch eng mit Kirche und Gemeinde verbunden. Besonders bewegend war für ihn die Feier seines 55-jährigen Priesterjubiläums erneut in Feldhausen – dem Ort, der ihm bis zuletzt am Herzen lag.