С 1940 по 1944 год Даргес был личным адъютантом Адольфа Гитлера и оказался последним адъютантом фюрера, дожившим до XXI века. Большую часть своей службы Фриц, который успел поработать и адъютантом Мартина Бормана, провел в резиденции Гитлера в баварском Оберзальцберге. Он пользовался доверием шефа, который поручал и деликатные миссии. Например, сопровождение Евы Браун в Италию во время визита туда нацистского лидера.
Как отмечает газета Bild, которой удалось недавно побеседовать с Даргесом, он так и остался "неисправимым" сторонником идей фюрера и никогда не сожалел о прошлом. По его словам, как человек Гитлер был вполне нормальным. Детали своего общения с Гитлером он так и унес в могилу, ни разу не раскрыв их журналистам. А вот разжаловал его Гитлер за день до покушения, когда Даргесу было поручено отгонять мух от фюрера, а он с этим не справился. Адъютант, сменивший Даргеса, погиб на следующий день во время взрыва в кабинете шефа.