Duke se narodil v Tobagu a do Spojených států se přestěhoval se svou matkou Corou Pantinovou a sestrou, když mu bylo devět let. Absolvoval střední školu v Brightonu v Rochesteru v New Yorku v roce 2004. Navštěvoval univerzitu v Buffalu, kde získal bakalářský titul v oboru divadlo, a přestěhoval se na Yale School of Drama, kde získal titul Master of Fine Arts (MFA) v oboru herectví, který absolvoval v roce 2013.