趙菲勒來自普通家庭,父母都沒有受過高等教育,移民美國後從事私人小額貸款業務。雖然他出生在美國,但一歲時被母親領回上海外祖母家撫養,直到六歲才重返美國。當時,一句英語也不會講,甚至不會用英語稱呼父母。
隨後,趙菲勒進入亞凱迪亞學區Holly街小學讀一年級,參加了英語發展計劃(LD)。到了初中階段英語成績提高到B+,進入亞凱迪亞高中後,四年來英文課程包括AP英語基本上都是A。