In Wien wurde Harrach 1677 zum geheimen Konferenzrat bestellt und 1684 zum Oberst-Stallmeister ernannt und stand dadurch regelmäßig in engem Kontakt mit Kaiser Leopold I., den er vielfach auch auf Jagden begleitete.