Booker T. Washington foi casado três vezes e teve três filhos, um com sua primeira esposa e dois com sua segunda esposa. Ele se casou com sua primeira esposa, Fanny Norton Smith, em 1882. Ela era um de seus alunos da escola Maiden, e sua filha Portia nasceu em 1883.
Fanny Norton Smith morreu um ano após o nascimento de Portia, e Booker T. Washington se casou com sua segunda esposa, Olivia Davidson, em 1885. Juntos, eles tiveram filhos Booker T. Washington Jr. e Ernest Davidson Washington. Olivia morreu em 1889, apenas quatro anos depois de se casarem. Washington se casou com sua terceira esposa, Margaret James Murray, em 1892, mas não tiveram filhos. Booker T. Washington morreu em 14 de novembro de 1915, e sua esposa Margaret morreu em 1925.