Στην πλευρά του Κάστρου που βλέπει προς την Χώρα βρίσκονται οι δύο είσοδοι του, η Λότζια και το Παραπόρτι. Παρά τις μετατροπές που ακολούθησαν τα σπίτια μετά την εξαλειψη του κινδύνου των επιδρομών, η αρχιτεκτονική φυσιογνωμία του Κάστρου παραμένει αναλλοίωτη έως σήμερα.
Κυριαρχούν δύο κύριοι παράλληλοι δρόμοι, η Κάτω Ρούα και η Μέσα Ρούα με την Κάτω Ρούα να είναι από τα πιο χαρακτηριστικά και πολυφωτογραφημένα σημεία του νησιού. Οι δύο δρόμοι καταλήγουν στην μοναδική πλατεία του Κάστρου λίγο πριν φτάσει κανείς στο δυτικό του άκρο, την αυλή της εκκλησίας της Παντάνασσας.