Είναι χτισμένη με οικοδομικά υλικά από αρχαίο ναό στη ρίζα του βράχου του Παλαιόκαστρου στο μέρος που υπήρχε η παλαιοχριστιανική βασιλική της Αγίας Αναστασίας του 5ου αιώνα.

Διαθέτει περίτεχνο δάπεδο και μία ιστορική κολυμπήθρα που γλύτωσε από τους πειρατές κουρσάρους. Η παράδοση λέει ότι οι πειρατές είχαν λεηλατήσει την εκκλησία και φόρτωσαν στο καράβι τους τη λεία. Η κολυμπήθρα βρέθηκε να επιπλέει στη θάλασσα και οι πιστοί την τοποθέτησαν πάλι στο ναό.

Ανασκαφές στην περιοχή πραγματοποίησαν οι Ιταλοί κατακτητές το 1924 που μετέφεραν στην Ρόδο αξιόλογα ευρήματα.

Όλος ο προαύλιος χώρος έχει ψηφιδωτά που δυστυχώς φθείρει ο χρόνος.