Narodil se v Nelsonu v Indianě. Když mu byly tři roky, rodina se přestěhovala do Kalifornie, kde ho rodiče zapsali do The Meglin School For Kiddies v Los Angeles. Když se učil tancovat, brzy se objevil ve filmech jako Wagon Wheels s Randolphem Scottem, Make a Wish s Bobbym Breenem, Too Many Parents, Easy to Take, Silk Hat Kid, The Big Broadcast of 1937, Sons of the Legion, Boy Trouble a The Biscuit Eater. V roce 1941 se také objevil v hlavní roli „Pinheada“ v muzikálové komedii Reg’lar Fellers s Carlem „Alfalfa“ Switzerem z „The Little Rascals“.
Objevil se ve dvou filmech: Váleční psi a Oči podsvětí, než odešel z branže. Během korejské války sloužil jako vojín 1. třídy v americké armádě a oženil se s Madelein T. McBrideovou, se kterou měl čtyři děti. Osm měsíců po svých 60. narozeninách Lee zemřel na infarkt a je pohřben na Riverside National Cemetery, Riverside, Kalifornie.