Στην είσοδο ακριβώς της Αραβησσού, σ’ ένα τόπο που οι περισσότεροι ακόμα και σήμερα ονομάζουν Καρσή Κιλισέ, δηλαδή η απέναντι εκκλησία, ή οι απέναντι εκκλησίες, βρίσκεται ο ιερός ναός του Αγίου Ιωάννη.
Λαξευμένος σ’ ένα «διαλεχτό» πυραμιδοειδή βράχο, ανάμεσα σε εκατοντάδες άλλους, δεσπόζει με τον καλοσχηματισμένο όγκο του που τον κάμει ξεχωριστό από μια πλειάδα παρόμοιων άλλων, και ίσως το πλέον αξιοθέατο όλης της περιοχής.