John Vernou Bouvier III föddes i East Hampton, New York 1891. Hans smeknamn,” Black Jack”, hänvisade till hans ständigt mörkbrun hud och hans flamboyanta livsstil.
Bouviers farfar, Michel Bouvier, var en fransk möbelsnickare från Pont-Saint-Esprit, i södra Provence-regionen. Michel immigrerade till Philadelphia 1815 efter att ha kämpat i Napoleonkrigen, arbetade för Joseph Bonaparte, gift, var änka och gifte sig sedan med Louise Clifford Vernou.
förutom att tillverka fina möbler hade Michel Bouvier ett företag som distribuerade ved. För att stödja den verksamheten förvärvade han stora områden av skogsmark, varav några innehöll en stor reserv av kol. Michel växte vidare sin förmögenhet i fastighetsspekulation. Hans söner, Eustes, Michel Charles( M. C.) och John V. Bouvier Sr., utmärkte sig i finansvärlden på Wall Street. De lämnade sina förmögenheter till sin enda återstående manliga Bouvier-arving, Major John Vernou Bouvier Jr., som använde några av pengarna för att köpa en egendom som kallas Lasata i East Hampton, Long Island.Major John Vernou Bouvier, Jr. (född 1866), en framgångsrik advokat, och Maude Frances Sergeant (född 1869) hade fem barn, varav John Vernou Bouvier III var den äldsta. Deras andra barn var William Sergeant” Bud ” Bouvier, som föddes 1893 och dog av alkoholism 1929; Edith Ewing Bouvier Beale, som föddes 1895 och blev fru till Phelan Beale, Sr.och mor till Edith Bouvier Beale, Phelan Beale, Jr. och Bouvier Beale; och tvillingarna Maude Reppelin Bouvier Davis och Michelle Caroline Bouvier Scott Putnam (född 1905).
John Vernou Bouvier III deltog i Philips Exeter Academy och Columbia Grammar & förberedande skola. Han studerade sedan vid Columbia College, sin fars alma mater, där han spelade tennis i två år innan han överfördes till Sheffield Scientific School vid Yale University. När han deltog i Yale var han medlem i boken och Snake secret society och Cloister Club. Han tog examen 1914.