Booker T. Washington è stato sposato tre volte e ha avuto tre figli, uno con la sua prima moglie e due con la sua seconda moglie. Ha sposato la sua prima moglie, Fanny Norton Smith, nel 1882. Era uno dei suoi alunni della scuola Maiden, e la loro figlia Portia nacque nel 1883.
Fanny Norton Smith morì un anno dopo la nascita di Portia, e Booker T. Washington sposò la sua seconda moglie, Olivia Davidson, nel 1885. Insieme, avevano figli Booker T. Washington Jr. ed Ernest Davidson Washington. Olivia morì nel 1889, solo quattro anni dopo essersi sposati. Washington sposò la sua terza moglie, Margaret James Murray, nel 1892, ma non avevano figli insieme. Booker T. Washington morì il 14 novembre 1915 e sua moglie Margaret morì nel 1925.