Είναι ένα από τα πιο ονομαστά ξωκλήσια του Αιγαίου, καθώς βρίσκεται ενταγμένο μέσα σε μια περιοχή με ιδιαίτερο φυσικό κάλλος. H Παναγία Κακαβιώτισσα είναι χτισμένη στη σκιά απότομων βράχων του βουνού Κάκαβος, από το οποίο παίρνει και το όνομά της.
Πέρα από την εντυπωσιακή τοποθεσία της, αυτό που της προσδίδει και έναν ξεχωριστό χαρακτήρα είναι το γεγονός ότι θεωρείται η μοναδική εκκλησία του κόσμου χωρίς σκεπή. Ιδρύθηκε τα παλαιοχριστιανικά χρόνια από ασκητές που βρήκαν καταφύγιο στις σπηλιές του βουνού, ενώ από τα βυζαντινά χρόνια και από τις αρχές του 14ου αιώνα υπάγεται στο Άγιον Όρος.
H πρόσβαση είναι σχετικά εύκολη, μέσω ενός μονοπατιού και περπάτημα περίπου 45 λεπτών με εκπληκτική θέα προς τη θάλασσα. Το πανηγύρι που γίνεται την Tρίτη μετά το Πάσχα είναι μια εμπειρία που θα μείνει αξέχαστη.