Kaplica została wybudowana w 2015 r. przez wiernych parafii neounickiej w Kostomłotach. Kamienna, czworoboczna kaplica zwieńczona jest pięcioma złotymi kopułami. Z trzech stron wykonane są arkady zamknięte metalowymi, ozdobnymi furtami. Wewnątrz kaplicy znajduje się ujęcie wody źródlanej w formie studni z ręczną pompą. Na wewnętrznych ścianach kaplicy wykonane są polichromie przedstawiające sceny z chrztu Jezusa, chrztu Rusi z postaciami św. św. Włodzimierza i Olgi oraz sceny zawarcia unii brzeskiej i męczeństwa świętych Kościoła grekokatolickiego.
Budowa kaplicy miała upamiętniać 1050-lecie chrztu Polski oraz 420-lecie unii brzeskiej. Kaplica ma też swoje praktyczne zastosowanie podczas jednego z największych świąt grekokatolickich – święta Jordanu, zwanego też świętem Chrztu Pańskiego. Wierni obrządku grekokatolickiego dokonują w tym dniu obrzędu poświęcenia wody zwanego Wodohreszczenijem. Przed budową kaplicy obrzęd ten miał miejsce w pobliskim Bugu. Pierwszy obrzęd poświęcenia wody w znajdującej się wewnątrz kaplicy studni miał miejsce 6 stycznia 2016 r.