Begraafplaats Orthen heeft een ingang aan zowel de Fort Orthenlaan als op de daaraan aansluitende straat met de naam Herven. Wie eerstgenoemde ingang neemt, ziet recht voor zich de kapel, in 1882 gebouwd ter nagedachtenis van bisschop Zwijsen. Ook de laan erheen is naar hem vernoemd. In de crypte van de kapel worden tot op de dag van vandaag katholieke hoogwaardigheidsbekleders bijgezet.

Daarnaast kan de kapel gebruikt worden voor uitvaartdiensten. Er kunnen ca. 90 personen tegelijk aanwezig zijn. De kapel beschikt over een orgel dat gebruikt kan worden tijdens plechtigheden.