Томас 'Томми' Смит, седьмой из двенадцати детей Ричарда и Доры Смит, родился 6 июня 1944-го, в Кларксвилле, штат Техас (Clarksville, Texas). В детстве он страдал от пневмонии, которая, однако, не помешала ему развиться физически. Свой огромный потенциал Томми выказал еще в школе, где поставил множество рекордов по легкой атлетике, некоторые из которых до сих пор не побиты.
Смит получил звание 'Самого ценного спортсмена' в школьном баскетболе, футболе и легкой атлетике. Он также был выбран вице-президентом в старших классах. Его успехи помогли Томми заработать стипендию Университета штата Калифорния в Сан-Хосе.