Booker T. Washington był żonaty trzy razy i miał troje dzieci, jedną z pierwszą żoną i dwiema z drugą żoną. W 1882 roku ożenił się z pierwszą żoną, Fanny Norton Smith. jeden z jego uczniów ze szkoły dziewiczej, a ich córka Portia urodziła się w 1883 roku.
Fanny Norton Smith zmarł rok po urodzeniu Portii, a Booker T. Washington poślubił swoją drugą żonę, Olivię Davidson, w 1885 roku. Razem mieli synów Bookera T. Washingtona Jr. i Ernesta Davidsona w Waszyngtonie. Olivia zmarła w 1889 roku, zaledwie cztery lata po ślubie. Waszyngton poślubił swoją trzecią żonę, Margaret James Murray, w 1892 roku, ale nie mieli razem dzieci. Booker T. Washington zmarł 14 listopada 1915 r., A jego żona Margaret zmarła w 1925 r.