Imela je zapleteno razmerje s svojo mamo, po ločitvi pa je skrbništvo nad njo dobil njen oče John Spencer, vikont Althorp. Lady Di je zaradi tega pomoč poiskala pri astrologinji Debbie Frank, ki ji je pomagala predelati čustva. »Diana je že v rosnih letih v sebi nosila veliko bolečine, saj jo je mati zapustila v otroštvu ... O tem sva veliko govorili, saj je bila zelo prizadeta.« Poleg tega je imela zelo slab odnos s taščo Raine, grofico Dartmoutha, vendar se je po navedbah Frankove ta z leti spremenil. »Ko sem jo julija zadnjič srečala tik pred njeno smrtjo, se je spet spomnila zgodbe o tem, kako je mama odšla in odnesla svoje obleke v avto,« je še povedala astrologinja. Povezanost družine Spencer se je skrhala po tem, ko se Dianinim staršem kljub želji ni rodil sin, ki bi v naslednjo generacijo prenesel družinski priimek. Pred Dianinim rojstvom se jima je sicer rodil John, a je sin umrl kmalu po rojstvu. Potem pa se je rodila Diana, kar je povzročilo dodatno napetost v družini. Diana je menila, da je bila za starše veliko razočaranje. ***null***