Joel Emmanuel Hägglund nació en Gävle (Suecia) el 7 de octubre de 1879. Su padre, Olof, era un trabajador ferroviario que tuvo nueve hijos, de los cuales Joel fue uno de los seis que lograron sobrevivir. La familia Hägglund eran feligreses devotos de la iglesia protestante, en la que aprendieron música. Joel tocaba el órgano, el piano, el acordeón, el banjo, la guitarra y el violín. En alguna ocasión comentó que disfrutaba más tocando el violín que comiendo.