Brigham Young nasceu no estado de Vermont, sendo o nono filho de John e Abigail Howe Young.[2] Sua família era pobre, por isso desde cedo ele trabalhou arduamente preparando e cultivando a terra, além de ajudar nas atividades domésticas. Aos 16 anos já era aprendiz de carpinteiro, marceneiro, pintor e vidraceiro. Orgulhava-se de seu trabalho e considerava-o "honesto, confiável e de grande durabilidade, a fim de satisfazer àqueles que contratavam seus serviços". Dizia que tais características eram "parte de minha religião".