Woolley, der von Beruf Landwirt war, wurde 1960 Nachfolger von James Turner als Präsident des britischen Bauernverbandes (National Farmers Union) und bekleidete diese Funktion bis zu seiner Ablösung durch Sir Gwilym Williams.