Jørgen Tauson var søn af olympisk sportsskytte Christian Tauson og kongelig balletdanser Agnes Stibolt Hansen. Den 4. oktober 1939 blev han i København gift med Ella Olsen (1922-2001). De fik børnene Peter Tauson (1940) og Anne Louise Tauson (1942). Tauson sov stille ind 26. februar 2016, 97 år gammel.