Στην νοτιοανατολική πλαγιά λόφου στον οποίο είναι κτισμένο το χωριό Αρχιμανδρίτα και αρκετά πιο χαμηλά από την κορυφή του, υπάρχει σπήλαιο – οστεοφυλάκιο στο οποίο φυλάσσονται τα οστά των 318 Πατέρων την εκκλησίας μας οι οποίοι κάτω από δύσκολες συνθήκες είχαν φθάσει στο νησί μετά το πέρας της Α’ Οικουμενικής συνόδου.
Το μικρό σπήλαιο, έχει σκαλιστεί μέσα στον μαλακό βράχο ο οποίος αποτελείται από κιμωλιούχες μάργες. Αρχικά ήταν τοιχογραφημένος με αγιογραφίες ενώ ήμερα σώζονται κάποια τμήματα τους και μας φανερώνουν το πόσο ωραίες ήταν.
Η τοπική παράδοση θέλει τα πλοία με τα οποία οι 318 Πατέρες επέστρεφαν στις πατρίδες τους να αναγκάζονται να αράξουν στις νότιες ακτές του νησιού και στο κόλπο Πισσουρίου, μετά το πέρας της Οικουμενικής συνόδου που έγινε το 325 μ. χ. στην Νίκαια της Βιθυνίας.
Οι 318 Πατέρες με τις συνοδείες τους αφού προχώρησαν στην ενδοχώρα, βρήκαν κατάλληλο τόπο και έκτισαν μοναστήρι. Ηγούμενος του μοναστηριού ήταν Αρχιμανδρίτης και από αυτό το γεγονός ο οικισμός που αναπτύχθηκε γύρω από αυτό ονομάστηκε «Αρχιμανδρίτα».
Το σπήλαιο λειτουργείται σαν εξωκλήσι.