Albert Einstein miał trójkę dzieci z Mileva Maric. Ich pierwsze dziecko, córka o imieniu Lieserl, urodziła się poza związkiem małżeńskim w 1902 r. I oddano do adopcji. Einstein i Maric pobrali się w 1903 roku. Ich małżeństwo stworzyło dwóch synów: Eduarda, urodzonego w 1910 roku i Hansa Alberta w 1914 roku.
Uważa się, że Lieserl zmarła w młodym wieku 21 miesięcy. Eduardowi zdiagnozowano schizofrenię i przyjęto do szpitala psychiatrycznego w Zurychu w Szwajcarii w wieku 38 lat. Hans Albert studiował w Szwajcarskim Federalnym Instytucie Technologii w Zurychu i został inżynierem hydraulikiem.
Drugie małżeństwo Einsteina dotyczyło jego pierwszej kuzynki Elsy Einstein-Lowenthal. Był ojczymem dla swoich dwóch córek, Ilse i Margot.