Manastırın batısında, halk arasında Aya Nikola Düzlüğü olarak bilinen bölgede, vaktiyle Aziz Nikolaos’a adanmış küçük bir Bizans kilisesinin kalıntıları yer almaktaydı. 19. yüzyılda yaşanan büyük depremde eski kilisenin yıkılmasının ardından, bu kalıntılardan alınan taş ve mermerler yeniden değerlendirildi.
Bu malzemeler, Karipi (Aya Yorgi) Manastırı’nın avlusuna taşınarak, sade ama anlamlı bir ayazma inşa edilmiştir. Kargir duvarlarla çevrili ve camekanla örtülü bu yapı, adanın manevi tarihinde derin bir iz bırakmıştır.
Rivayete göre, ayazmanın yapımında kullanılan taşların bir kısmı, yakınlardaki terk edilmiş Aya Nikola düzlüğündeki kiliseden getirilmiştir. Böylece Aya Nikola Ayazması, yıkılan kilisenin hatırasını yaşatmaya devam ederken, Burgazada’nın kutsal dokusunun bir parçası hâline gelmiştir.