Am 8. November 1820 heiratete Ballin seine Kusine Bräunchen geb. Goldschmidt (* 17. Januar 1789; † 25. Mai 1883), deren Vater Josef Baruch Goldschmidt als Kaufmann wirkte und aus einer der ältesten jüdischen Familien Oldenburgs kam.