Η Μονή της Παναγίας της Καστριανής, που είναι και η προστάτιδα του νησιού, βρίσκεται σε κοντινή απόσταση από την παραλία του Οτζιά, στο βορειονατολική πλευρά του νησιού. Σύμφωνα με την τοπική παράδοση, η ίδια η Παναγία υπέδειξε την τοποθεσία προσκυνήματός της πάνω στον επιβλητικό λόφο Καστρί.
Στο σημείο αυτό βρέθηκε το 1700 η εικόνα της θαμμένη μες στη γη, από βοσκούς που παρατήρησαν τη νύχτα μια λάμψη στην κορυφή του υψώματος. Το 1708 έκτισαν εκεί ένα εκκλησάκι, όπου μέχρι σήμερα φυλάσσεται η θαυματουργή εικόνα, ενώ το 1910 χτίστηκε από πάνω του μεγάλος ναός για να χωρά το πλήθος των πιστών που καταφθάνουν να προσκυνήσουν την χάρη της. Η Παναγία τιμάται πολλές φορές τον χρόνο, ιδίως, όμως, τον Δεκαπενταύγουστο. Παράλληλα, τα κελιά της Μονής λειτουργούν ως ξενώνες, ενώ στην τραπεζαρία προσφέρονται τοπικά εδέσματα.
