Ben blijft net als zijn broer Kasper en zijn vader zijn hele leven bij de W.A. Scholten aardappelfabriek werken. Het was hard werken, met ook vaak nachtdiensten. Toch was de fabriek voor die tijd geen slechte werkgever. In 1890 bood Scholten zijn werknemers al de mogelijkheid om gebruik te maken van een collectieve begrafenisverzekering.