Skønt han 1660 beskikkedes af Ludvig XIV til at bestyre forretningerne i Sverige under gesandtens fraværelse, skaffede Terlon ham dog tilladelse til at træde tilbage, og 1. januar 1661 aflagde han sin ed til Frederik III. 3. marts 1661 stod hans bryllup; men ægteskabet varede kun til 25. juli 1669, da hustruen døde.