Kerr sinh ra ở Balmain, Sydney, New South Wales, vào ngày 24 tháng 9 năm 1914. Ông là người lớn nhất trong ba đứa con được sinh ra của Laura May (née Cardwell) và Harry Kerr; em trai Dudley sinh năm 1917 và em gái Elaine sinh năm 1926. [1] Cha mẹ và ông bà mẹ của Kerr sinh ra ở Úc, trong khi ông bà của ông đến từ Sunderland, Anh, đến Sydney vào năm 1886.