مات در لیدز در خانواده چارلز فرانسیس مات و لیلیان مری رینولدز، نوه سر جان ریچاردسون، و نوه سر جان هنری پلی، بارونت اول، متولد شد. خانم رینولدز فارغ التحصیل ریاضیات تریپوکمبریج بود و در کمبریج بهترین ریاضیدان زن سال خود بود. پدر و مادرش در آزمایشگاه کاوندیش ملاقات کردند، زمانی که هر دو درگیر تحقیقات فیزیک زیر نظر جوزف جان تامسون بودند.[۱]
نویل ابتدا در دهکده گیگلزویک، در وست رایدینگ یورکشایر، جایی که پدرش استاد ارشد علوم در مدرسه گیگلزویک بود و مادرش نیز در مدرسه ریاضیات تدریس می کرد، بزرگ شد. خانواده (به دلیل شغل پدرش) ابتدا به استافوردشایر، سپس به چستر و در نهایت لیورپول نقل مکان کردند، جایی که پدرش به عنوان مدیر آموزش منصوب شد. مات در ابتدا توسط مادرش در خانه آموزش دید. در سن ده سالگی، تحصیلات رسمی را در کالج کلیفتون در بریستول آغاز کرد و پس از آن در کالج سنت جان، کمبریج تحصیل کرد، جایی که او ریاضیات تریپو را با نظارت رالف اچ فاولر خواند.[۲]