Nach dem Tod des Vaters im Jahr 1822 übernahm Andrews älterer Bruder zunächst die Baumschule; Andrew trat 1835 als Partner in das Unternehmen ein, das ab da unter dem Namen C & A.J. Downing firmierte.