John Vernou Bouvier III urodził się w East Hampton w stanie Nowy Jork w 1891 roku. Jego pseudonim, „Black Jack”, odnosił się do jego wiecznie ciemnej opalonej skóry i jego ekstrawaganckiego stylu życia.
pradziadek Bouviera, Michel Bouvier, był francuskim stolarzem z Pont-Saint-Esprit, w regionie Prowansja-Alpy-Lazurowe Wybrzeże. Michel wyemigrował do Filadelfii w 1815 roku po walkach w wojnach napoleońskich, pracował dla Józefa Bonaparte, ożenił się, został owdowiały, a następnie poślubił Louise Clifford Vernou.
Michel Bouvier oprócz produkcji pięknych mebli zajmował się dystrybucją drewna opałowego. Aby wesprzeć ten biznes, nabył duże połacie zalesionych gruntów, z których część zawierała duże rezerwy węgla. Michel powiększał swój majątek w spekulacjach na rynku nieruchomości. Jego synowie, Eustes, Michel Charles (M. C.) I John V. Bouvier SR., wyróżnili się w świecie finansów na Wall Street. Pozostawili swoją fortunę jedynemu pozostałemu męskiemu spadkobiercy Bouviera, majorowi Johnowi Vernou Bouvier Jr., który wykorzystał część pieniędzy na zakup posiadłości znanej jako Lasata w East Hampton Na Long Island.
Major John Vernou Bouvier, Jr. (ur. 1866), odnoszący sukcesy adwokat, i Maude Frances Sergeant (ur. 1869) mieli pięcioro dzieci, z których John Vernou Bouvier III był najstarszy. Ich innymi dziećmi byli William Sergeant „Bud” Bouvier, który urodził się w 1893 roku i zmarł z powodu alkoholizmu w 1929 roku; Edith Ewing Bouvier Beale, która urodziła się w 1895 roku i została żoną Phelana Beale 'a Seniora i matką Edith Bouvier Beale’ a, Phelana Beale 'a Juniora i Bouvier Beale’ a; oraz bliźniaczki Maude Reppelin Bouvier Davis i Michelle Caroline Bouvier Scott Putnam (ur. 1905).
John Vernou Bouvier III uczęszczał do Philips Exeter Academy i Columbia Grammar & szkoły przygotowawczej. Następnie studiował w Columbia College, alma mater swojego ojca, gdzie grał w tenisa przez dwa lata, zanim przeniósł się do Sheffield Scientific School na Uniwersytecie Yale ’ a. Podczas nauki w Yale był członkiem tajnego Towarzystwa Książki i węża oraz klubu klasztornego. Studia ukończył w 1914 roku.