Orphelin de sa mère morte en couches, Eugène Cantor a été élevé par les parents de celle-ci qui tenaient un petit commerce dans le quartier juif de Newak au nord de New York. Pas de père non plus, celui-ci, compte tenu des condamnations auxquelles il avait eu droit, ayant été virilement prié par le grand père d'Eugène de ne pas tenter de devenir un mauvais exemple pour son fils et n'ayant pas insisté…