Στον Ανάβατο ξεχωρίζει και σπανίζει μέσα στο κάστρο και τα οχυρά του νησιού ο καστρόπυργος του χωριού. Η φύση βοήθησε τον τεχνίτη, καθώς ο απροσπέλαστος βράχος είναι κάστρο φυσικό, ικανό να εκμηδενίσει και τις πιο δυνατές ανθρώπινες οχυρώσεις. Το ιδιόμορφο γνώρισμα του τείχους είναι ότι δεν είναι ένα ιδιαίτερο κτίσμα με πυλώνες, πύργους και επάλξεις, αλλά βράχος που πάνω του υψώθηκαν σπίτια γερά και τείχη πλατιά που ενώθηκαν και έφτιαξαν το κάστρο. Εδώ όλα τα  κτίσματα είναι φτιαγμένα από σιδηρόπετρα. Το κάστρο έχει διαφορετικό ύψος, γιατί είναι ακανόνιστη η επιφάνεια του βράχου, όπου χτίστηκε πάνω του. Το τείχος αυτό, φροντισμένο στην ανθρώπινη φυσική του οχύρωση, ήταν στον Μεσαίωνα με τις πειρατικές επιδρομές από τα καλύτερα οχυρά καταφύγια της Χίου. Την εποχή των Γενουατών (1356 μ.Χ.) το κάστρο του Αναβάτου διέθετε ακόμη και πυροβόλα,  γι’ αυτό και η φρουρά του δεν υπάκουε στις προσταγές των Γενουατών διοικητών της Χίου.