Kilisenin kuzeydoğusuna giden kestirme bir yol olan Takım Ağa Sokağı’nda, Vaftizci Yahya’ya adanmış bir ayazmaya ev sahipliği yapan camla örtülmüş bir yapı yer alır. Bunun da, Vaftizci Yahya Kilise’sine bağlı asıl Bizans manastırının bir parçası olduğuna inanılır.