6 января 1903 года Эйнштейн женился на двадцатисемилетней Милеве Марич[84]. В феврале 1919 года они официально развелись[42].
У них родились трое детей. Первой, ещё до брака, родилась дочь Лизерль (1902), но выяснить её судьбу биографам не удалось. Вероятнее всего, она умерла во младенчестве — в последнем из сохранившихся писем Эйнштейна, где она упоминается (сентябрь 1903), речь идёт о неких осложнениях после скарлатины[85][86].
Старший сын — Ганс Альберт (1904—1973) в 1938 году эмигрировал вслед за отцом в США; впоследствии он стал признанным специалистом по гидравлике и профессором Калифорнийского университета (1947).
Младший сын Эйнштейна, Эдуард (1910—1965), около 1930 года заболел тяжёлой формой шизофрении и закончил свои дни в цюрихской психиатрической лечебнице.
В июне 1919 года Эйнштейн женился на своей двоюродной сестре со стороны матери Эльзе Лёвенталь (урождённой Эйнштейн) и удочерил двух её детей. В конце года к ним переехала его тяжелобольная мать Паулина; она скончалась в феврале 1920 года. Судя по письмам, Эйнштейн тяжело переживал её смерть.
Двоюродная сестра Эйнштейна, Лина, погибла в Освенциме, другая сестра, Берта Дрейфус, умерла в концлагере Терезиенштадт[87].