Νοτιοανατολικά της πόλης βρίσκεται το Ορφανοτροφείο, που είναι το πρώτο μεγάλο Δημόσιο κτίριο που χτίστηκε από τον πρώτο κυβερνήτη του νεοσύστατου ελληνικού κράτους, Ιωάννη Καποδίστρια. Αν και ο αρχικός προορισμός του κτιρίου ήταν η στέγαση, σίτιση και εκπαίδευση περίπου εξακοσίων ορφανών του Αγώνα, στους χώρους του στεγάστηκε, μεταξύ άλλων, το πρώτο Αρχαιολογικό Μουσείο και άλλα δημόσιες υπηρεσίες.
Από το 1880 και για 105 χρόνια λειτούργησε ως φυλακή. Το 1985 το κτίριο χαρακτηρίστηκε διατηρητέο, ενώ στις μέρες μας γίνονται οι απαραίτητες ενέργειες προκειμένου να στεγάσει το Διαχρονικό Μουσείο της Αίγινας.
