Tanınmış bir Floransa'lı ailenin üyesidir. Babası Floransa'lı tanınmış bir kilise hukukçusu olan Silvestro Aldobrandın olup Fano'nun valisi idi. Babası Mediciler ve "Lisa Deti" ile olan anlaşmazlıklardan dolayı Floransa'dan ayrılmak zorunda kalmıştı. Erkek kardeşi olan Giovanni Aldobrandını de kilise papazlığına girip sonradan Kardinal olmuştur.
