Bygningen rummede også et fængsel, og her sad blandt andet sørøveren Stede Bonnet fængslet, fra han blev taget til fange og dømt for sørøveri i november 1718, til han blev hængt på en sandbanke ud for byen i december samme år.