He was the younger son of Lithuanian Jewish parents and the grandson of Morris Milk, a department store owner who helped to organize the first synagogue in the area.
Byl mladším synem litevských Židů a vnukem obchodníka Morrise Milka, který vlastnil obchodní dům a pomohl zorganizovat první synagogu v oblasti.