Benno Scharmanski wuchs in München in einer Arbeiterfamilie mit drei jüngeren Geschwistern in großer Armut auf. Als 12-Jähriger nahm er auf eigene Faust an der Beerdigung von Bayerns erstem Ministerpräsidenten Kurt Eisner teil.