A mãe biológica de Nicole Richie é Karen Escovedo, a ex-assistente executiva de Sheila E., que por acaso é tia de Nicole. Escovedo tem ascendência crioula, afro-mexicana e espanhola.
Lionel Richie e Brenda Harvey foram responsáveis por criar Nicole desde que ela tinha 2 anos de idade. Eles a adotaram aos 9 anos, mas como resultado de um escândalo de traição, Brenda e Lionel se separaram. Nicole tem dois meio-irmãos chamados Sofia e Myles, do segundo casamento de Lionel. Michael Jackson é seu padrinho e Nancy Davis é sua madrinha. Nicole e sua mãe biológica estão na vida uma da outra, mas Nicole considera Brenda e Lionel seus pais.