Måske er det egentlige Korsør Slot, der har ligget på det senere søbatteris plads, først opstået, da Tårnborg Slot havde tabt sin betydning, om der endog tidligere har ligget en mindre befæstning ved indløbet til havnen.