El pequeño Alphonse ya apuntaba maneras desde su más tierna infancia, porque con solo doce años fue expulsado de su escuela en Nueva York por escupirle en la cara a un profesor. Nunca volvió a pisar un colegio, y para que no perdiera el tiempo holgazaneando en las calles, sus padres le buscaron un trabajo en una tienda de dulces.